Das dreieinhalb Stockwerke hohe Gebäude in der 604 H Street NW wurde 1843 von Jonathan T. Walker erbaut. Es wurde als in der frühen Republik oder föderalen Stil oder in „vernacular Greek Revival“ Stil beschrieben. Es steht auf einem Grundstück von 29 x 100 Fuß (8,8 m × 30,5 m). Das Gebäude ist 23 Fuß (7,0 m) breit, direkt auf den Bürgersteig auf der Südseite der Straße ausgerichtet und hat eine Tiefe von 36 Fuß (11 m). Das Gebäude wurde 1925 so umgebaut, dass der erste Stock als Gewerbefläche genutzt werden konnte.
John Surratt kaufte das Haus am 6. Dezember 1853 von Augustus A. Gibson und betrieb es als Pension. Nach dem Tod ihres Mannes im Jahr 1862 entschied sich Mary Surratt, ihre Taverne / Residenz im nahe gelegenen Surrattsville, Maryland, an John M. Lloyd, einen ehemaligen Washington, DC, Polizisten und Sympathisanten der Konföderierten, zu vermieten und zog in die Washington Boarding House.
1865 hörte das Militärtribunal, das die Verschwörer von Lincolns Ermordung verurteilte, Zeugenaussagen von Bewohnern der Pension, dass Surratt sich regelmäßig mit John Wilkes Booth und den Lincoln-Verschwörern im Haus getroffen hatte. Lloyd sagte dem Tribunal, dass er von Surratt angewiesen worden sei, Booth und dem Mitverschwörer David Herold Feldbrillen und Waffen zur Verfügung zu stellen. Auf der Grundlage dieser Beweise wurde Surratt verurteilt und zum Tode verurteilt. Für ihre Rolle als Mitglied der Verschwörung zur Ermordung von Abraham Lincoln wurde sie die erste Frau, die von der Bundesregierung der Vereinigten Staaten hingerichtet wurde. Sie wurde durch Erhängen hingerichtet.
Das Gebäude wurde am 11.August 2009 in das U.S. National Register of Historic Places aufgenommen. Die Auflistung wurde als Featured Listing in der National Park Service’s Weekly List vom 28.August 2009 angekündigt.
Im April 2011erregte das Haus einige Aufmerksamkeit mit der Veröffentlichung eines Films über Mary Surratt, Die Verschwörerin von Regisseur Robert Redford. Ab 2020 wird die Gewerbefläche als Restaurant mit Karaoke-Räumen genutzt.