Edificato nel XVI sec. dal conestabile di Montmorency, fu rimaneggiato nel XVII sec.. Françoise d'Aubigné, vedova del commediografo Scarron e futura marchesa di Maintenon, vi incontrò la marchesa di Montespan e divenne la governante dei figli che la favorita aveva avuto da Luigi XIV. Il palazzo accoglie attualmente la direzione degli Affari Culturali del Comune di Parigi.