Dolley Madisonová (1809 až 1817) musela v roce 1814 Bílý dům na čas opustit, a to kvůli britské armádě, která už pronikla do americké metropole. Vzala s sebou portrét prvního prezidenta George Washingtona, což se následně ukázalo jako velmi prozíravé. Britové totiž následně Bílý dům podpálili. To, že obraz stále visí v sídle amerických prezidentů, je její zásluha.
