Nachdem die Unionslinien nördlich und westlich von Gettysburg in der Mittagszeit zusammenbrachen, zogen sich die Truppen durch die Stadt in Richung Cemetery Hill zurück. Es kam in der Folge zu Kämpfen in den Straßen der Stadt. Es wurden dafür Barrikanden errichtet und konföderierte Scharfschützen feuerten aus einigen Häusern auf die nahen Linien der Unionstruppen. Die Schäden an den Häusern sind noch heute sichtbar. Viele Familien waren zum Zeitpunkt der Kämpfe bereits geflohen, weil sie afro-amerikanischer Herkunft waren und fürchteten, wieder versklavt zu werden. Die wenigen, die geblieben waren, versorgten die verwundeten Soldaten oder versteckten diese sogar. Die Stadt blieb bis zum 3. Juli besetzt, bis sich die Konföderierten in Richtung Cashtown zurückzogen.