La posizione dell'Unione era insostenibile e gli uomini potevano vedere l'XI Corpo ritirarsi dalla battaglia del nord, inseguito da masse di Confederati.Doubleday ha ordinato un ritiro a est a Cemetery Hill.^[44] Sul fianco meridionale, la brigata North Carolina di Brig.Il generale James H. Lane ha contribuito poco all'assalto;fu tenuto impegnato da uno scontro con la cavalleria dell'Unione sulla Hagerstown Road.Brigantino.La Georgia Brigade del generale Edward L. Thomas era in riserva ben arretrata, non convocata da Pender o Hill per assistere o sfruttare la svolta.^[45]Le truppe dell'Unione si ritirarono in diversi stati di ordine.Si diceva che le brigate su Seminary Ridge si muovessero deliberatamente e lentamente, mantenendo il controllo, sebbene l'artiglieria del colonnello Wainwright non fosse stata informata dell'ordine di ritirarsi e si trovassero sole.Quando Wainwright si rese conto della sua situazione, ordinò ai suoi cannonieri di ritirarsi a piedi, non volendo far prendere dal panico la fanteria e iniziare una disfatta.Quando la pressione alla fine aumentò, Wainwright ordinò ai suoi 17 cannoni rimanenti di galoppare lungo Chambersburg Street, tre di fianco.^[46] AP Hill non riuscì a impegnare nessuna delle sue riserve nell'inseguimento dei difensori del Seminario, una grande occasione mancata.^[47]