L'antico vescovado fu costruito nel 1784 nel luogo in cui sorgeva la casa di Madame de Warens (1700-1762), protettrice e maestra di Jean-Jacques Rousseau. Nel cortile, luogo del primo incontro con M.me de Warens, gli ammiratori dello scrittore hanno fatto collocare un busto di Jean-Jacques e la famosa "balaustra d'oro" che aveva tanto desiderato.