Po skončení občanské války dala Harvard Corporation oficiální souhlas skupině významných a různorodých absolventů Harvardu, kteří požádali univerzitu, aby jim umožnila shromáždit finanční prostředky na památník absolventů Harvardu, kteří bojovali za Unii. Nový výbor padesáti absolventů navrhl, aby navrhovaný památník měl podobu budovy, která by nejen svědčila o hrdinství těch, kteří padli, ale také splňovala naléhavé a praktické potřeby koleje na divadlo a prostor pro setkávání absolventů.
Výbor navrhl Síň absolventů, v níž by se studenti a absolventi mohli inspirovat obrazovou a sochařskou přítomností jejích zakladatelů, mecenášů, profesorského sboru, prezidentů a nejvýznamnějších synů. Vize byla přesvědčivá: mezi lety 1865 a 1868 vybrali členové výboru ohromující částku 370 000 dolarů, která se rovnala jedné dvanáctině nadačního jmění univerzity.
V téže době Charles Sanders, který byl členem ročníku 1802 a který v letech 1827-1831 zastával funkci „správce koleje“, odkázal koleji 40 000 dolarů za účelem vybudování „sálu nebo divadla, které by se používalo ve dnech zahájení studia, ve dnech tříd, ve dnech výstav, ve dnech setkání společnosti absolventů nebo při jakékoli jiné veřejné příležitosti spojené s kolejí, ať už literární nebo slavnostní“. Oba projekty se tak spojily a každý z nich pomohl uskutečnit ten druhý.
Pro novou pamětní budovu bylo vybráno místo označované jako Delta kvůli svému trojúhelníkovému tvaru, které ze tří stran ohraničují ulice Cambridge, Kirkland a Quincy. Výbor pro stavbu pamětní síně zakoupil Jarvis Field (nyní právnická fakulta), aby poskytl nové místo pro hřiště, které dříve zabíralo Deltu.
V prosinci 1865 vyzval výbor několik významných architektů (všichni absolventi Harvardu), aby předložili soutěžní návrhy, a zakódoval je podle čísel, aby zajistil nestranný výběr. Vybrán byl návrh Williama Roberta Wareho, ročník 1852, a Henryho Van Brunta, ročník 1854, i když byl v následujících měsících a letech značně vylepšen. V září 1870 dostala budova oficiální název Memorial Hall. O měsíc později byl položen její základní kámen. Představovala pozoruhodný úspěch skupiny odhodlaných dobrovolníků, kteří během pouhých pěti let dokončili projekt a položili základní kámen. Oliver Wendell Holmes složil hymnu pro slavnost, která se konala 6. října 1870 při položení základního kamene Memorial Hall.
Ne s úzkostí srdcí, která puknou
Přišli jsme jako truchlící plakat za své mrtvé;
Smutek v našich prsou zmohl se bolestí,
zelený je trávník, kde jsme prolili své slzy.
Když po jejich mramorech plíží se mech
Každé jméno a jeho záznam odnáší pryč.
Předejte jejich hrdý příběh paměti,
Svatořečený v chrámu, který dnes posvěcujeme.
Ztichla jejich bojiště, skončily jejich pochody.
Hluché jsou jejich uši k bubnování smutku–
Povstaňte z drnů, vy vzdálené sloupy a oblouky!
Vyprávějte jejich světlé činy věkům nezrozeným.
Mohou se z portálu vytratit pověsti a legendy,
kamen se může rozpadnout a portál spadnout;
byli to stavitelé, jejichž dílo je nesmrtelné,
korunované kopulí, která je nad námi všemi.
V roce 1874, tedy za necelé čtyři roky, byly sál a transept předány k užívání. Sandersovo divadlo bylo z podstatné části dokončeno na jaře 1875, ale začalo se používat až při zahajovacích cvičeních na jaře 1876. Věž byla dokončena v roce 1877.
V roce 1878 konečně vyvrcholilo třináctileté úsilí o uctění památky padlých harvardských vojáků a proměnu života vysokoškoláků oficiálním předáním budovy univerzitě.