Položaj Unije bio je neodrživ, a ljudi su mogli vidjeti kako se XI korpus povlači iz sjeverne bitke, progonjen masama Konfederacija.Doubleday je naredio povlačenje istočno do Cemetery Hilla.^[44] Na južnom krilu, sjevernokarolinska brigada Brig.Gen. James H. Lane malo je pridonio napadu;zaokupio ga je sukob s konjicom Unije na Hagerstown Roadu.Brig.Brigada Georgia generala Edwarda L. Thomasa bila je u pričuvi daleko pozadi, a nisu je pozvali Pender ili Hill da pomognu ili iskoriste proboj.^[45]Trupe Unije povukle su se u različitim stanjima reda.Rečeno je da su se brigade na Seminary Ridgeu kretale promišljeno i polako, održavajući kontrolu, iako topništvo pukovnika Wainwrighta nije bilo obaviješteno o naredbi za povlačenje i našlo se samo.Kada je Wainwright shvatio svoju situaciju, naredio je svojim topničkim posadama da se povuku u hodu, ne želeći paničariti pješaštvo i započeti bijeg.Kako je pritisak na kraju rastao, Wainwright je naredio svojim 17 preostalih topova da galopiraju ulicom Chambersburg, tri u nizu.^[46] AP Hill nije uspio angažirati nijednu svoju rezervu u potjeri za braniteljima sjemeništa, što je bila velika propuštena prilika.^[47]