Di proprietà dell'American Architecural Foundation, questo museo - The Octagon - è la più vecchia istituzione americana dedicata all'architettura e al design, ed uno dei migliori esempi dell'architettura di epoca federale. L'edificio fu costruito da William Thornton, primo architetto del Campidoglio di Washington, per il colonnello John Tayloe, che utilizzò la casa come residenza invernale della sua famiglia dal 1801 fino al 1817, quando si trasferì definitivamente in questa casa. Va notato che l'isolato su cui è costruito il museo è triangolare, l'edificio stesso presenta sei lati e non è quindi un ottagono come potrebbe far pensare il nome.