Il fut commencé au 13ème siècle. Il se verra doté entre 1500 et 1511 d’une façade due à Charles II d’Amboise qui s’inspirera de ce qu’il aura vu durant les campagnes d’Italie avec Charles VIII. On peut y voir un déploiement de motifs d’une grande richesse. On y voit des lucarnes aux frontons ajourés et ciselés.
Une galerie, comportait des médaillons italiens de marbre blanc, faits à Gènes, et représentant des empereurs romains.