| Bertrand du Pouget | Cardinal pour qui le palais a été initialement édifié. |
| Audouin Aubert | Cardinal ayant occupé le palais avant de le donner à la chartreuse. |
| Innocent VI | Oncle d'Audouin Aubert et fondateur de la chartreuse. |
| Léonard Rossi de Giffone | Cardinal-prêtre ayant remanié l'édifice vers 1380. |