Questo museo è nascosto dietro alle alte mura merlate, tutte bianche, di un antico palazzo seicentesco costruito per il re Naresuan, poi interamente distrutto dai Birmani e quindi abbandonato. L'edificio fu in seguito restaurato dal re Rama IV, che lo trasformò nella sua residenza estiva. Intorno ad un cortile si articolano vari edifici, tra cui il Phiman Rattaya, antico quartiere delle donne, in cui si possono oggi osservare vari oggetti della vita quotidiana.