1829–1841: de la colecție privată la sediu federal
Originile datează din 1829, când John Varden a început o mică colecție de artă în capitală. Până în 1841, colecția fusese instalată în Patent Office Building, aducând arta într-un important complex federal din apropierea actualului nucleu al cartierului Penn Quarter.
1906 și 1968: statut național și un sediu muzeal deschis publicului
Un tribunal federal a recunoscut colecția în 1906 drept colecția de artă a națiunii, iar o renovare amplă a clădirii a dus la deschiderea pentru public în 1968. Această succesiune explică de ce muzeul de astăzi are atât un caracter instituțional, cât și o atmosferă foarte primitoare pentru vizitatori încă de la nivelul străzii.
1980 și 2000: numele muzeului se aliniază misiunii sale
Instituția și-a schimbat numele în 1980, apoi a adoptat numele Smithsonian American Art Museum în 2000. Pentru vizitatori, acest lucru contează deoarece misiunea este explicită: artă americană din perioade diferite, prin diverse medii de expresie și voci, toate într-un singur loc.
2000–2006: renovarea creează experiența de astăzi
O renovare de șase ani, la începutul anilor 2000, a transformat clădirea, care s-a redeschis în 2006 ca sediu comun pentru SAAM și National Portrait Gallery. Rezultatul este parcursul de vizitare pe care îl simți astăzi: galerii importante, acces central la transport și unul dintre principalele centre culturale acoperite din centrul orașului Washington.