Il palazzo fu abitato prima da Auguste Comte, fondatore del positivismo, nato in questa città, e successivamente da Paul Valéry, poeta di Sète.