Nella residenza in mattoni e stile Tudor del 1911 dove abitò Charles Allis, primo presidente della Allis-Chalmers Company di Milwaukee, il museo ospita oggi la sua collezione di oggetti d'arte, dipinti e mobili antichi, suddivisa su due piani. Il museo è noto per la sua collezione di ceramica e porcellana asiatica nonché per le opere d'arte americana (Hudson River School) ed europea (mobili e alcuni dipinti della Scuola di Barbizon).