4 Temmuz sabahı, Lee'nin ordusu hâlâ oradayken, Meade süvarilerine Lee'nin ordusunun arkasına gitmelerini emretti.^[Şiddetli] bir yağmurda, ordular kanlı tarlalarda birbirlerine baktılar, aynı gün, yaklaşık 900 mil (1.400 km) uzakta, Vicksburg garnizonu Tümgeneral Ulysses S. Grant'e teslim oldu.Lee, 3 Temmuz gecesi Gettysburg kasabasını boşaltarak hatlarını Seminary Ridge'de bir savunma pozisyonuna dönüştürdü.Konfederasyonlar, Meade'in saldıracağını umarak savaş alanının batı tarafında kaldılar, ancak temkinli Birlik komutanı, daha sonra eleştirileceği bir karar olan riske karşı karar verdi.Her iki ordu da kalan yaralılarını toplamaya ve ölülerin bir kısmını gömmeye başladı.Lee'nin esir değişimi önerisi Meade tarafından reddedildi.^[123]Yağmurlu öğleden sonra Lee, ordusunun savaşmayan bölümünü Virginia'ya geri taşımaya başladı.Tuğgeneral John D. Imboden komutasındaki süvari, Cashtown ve Greencastle üzerinden Williamsport, Maryland'e giden uzun bir rotayı kullanarak on yedi mil uzunluğundaki erzak ve yaralı adam trenine eşlik etmekle görevlendirildi.Gün batımından sonra, Lee'nin ordusunun savaşan kısmı, Fairfield yolunda başlayan daha doğrudan (ama daha dağlık) bir rota kullanarak Virginia'ya çekilmeye başladı.^[124] Lee ne yapması gerektiğini tam olarak bilse de Meade'nin durumu farklıydı.Meade, Lee'nin gittiğinden emin olana kadar Gettysburg'da kalması gerekiyordu.Önce Meade ayrılırsa, Lee'nin Washington veya Baltimore'a gitmesi için bir boşluk bırakabilirdi.Ayrıca savaş alanını ilk terk eden ordu genellikle mağlup ordu olarak kabul edildi.^[125]