Questa residenza di 15.000 m2 è composta dal Palazzo Vecchio e dal Palazzo Nuovo. Il primo, fortezza dall'architettura austera, fu commissionato da Benedetto XII nel 1334. Clemente VI, gran principe della Chiesa, artista e prodigo mecenate, trovò forse il luogo troppo austero: nel 1342 commissionò infatti il Palazzo Nuovo a Jean de Louvres. La torre della Garde-Robe e due nuovi corpi di fabbrica chiusero la corte d'onore, fino ad allora piazza pubblica. Se l'aspetto esteriore non cambiò, l'interno fu decorato con fasto da un gruppo di artisti, diretto da Simone Martini e poi da Matteo Giovannetti.