Il a été construit à l'emplacement même d'un bâtiment détruit par l'incendie du 26 février 1559, et implanté dans ce qui s'appelait à l'époque la rue de l'Epicerie.
Sa restauration a permis de dégager, sous l'enduit, une admirable façade sculptée Renaissance.