Serangan itu akhirnya dimulai sekitar pukul 6 sore Dua brigade Early (di bawah Brigjen. Harry T. Hays dan Robert F. Hoke) memukul mundur kiri-tengah Sedgwick melintasi Plank Road, tetapi upaya Anderson kecil dan McLaws sekali lagi berkontribusi tidak ada: serangan Konfederasi terakhir dilakukan dan dipukul mundur.Sepanjang hari pada tanggal 4 Mei, Hooker tidak memberikan bantuan atau bimbingan yang berguna kepada Sedgwick, dan Sedgwick tidak memikirkan hal lain selain melindungi garis mundurnya.^[21]Jenderal Benham dari Korps Teknik AS telah menambahkan jembatan di Bendungan Scott untuk membantu berkomunikasi dengan Jenderal Hooker.Ketika retret direncanakan, Jenderal Benham pada tanggal 4 Mei menambahkan jembatan kedua dan dia serta Jenderal Sedgwick setuju untuk menyeberang pada malam hari untuk menghindari kehilangan sebagian besar korpsnya.Korps Union ke-6 mulai mundur ke garis yang lebih kecil yang telah direncanakan sebelumnya lebih dekat ke jembatan, dan mulai mundur tanpa kerugian.^[32]