Sekitar pukul 17:30, setelah menyelesaikan putarannya di sekitar musuh, Jackson menoleh ke Robert Rodes dan bertanya kepadanya, "Jenderal, apakah Anda siap?"Ketika Rodes mengangguk, Jackson menjawab, "Kalau begitu, kamu boleh maju."Sebagian besar orang dari Korps XI berkemah dan duduk untuk makan malam dan senapan mereka diturunkan dan ditumpuk.Petunjuk pertama mereka tentang serangan yang akan datang adalah pengamatan banyak hewan, seperti kelinci dan rubah, yang melarikan diri ke arah mereka keluar dari hutan barat.Ini diikuti oleh derak tembakan senapan, dan kemudian jeritan "Rebel Yell" yang tidak salah lagi.Dua dari resimen von Gilsa, Pennsylvania ke-153 dan New York ke-54, telah ditempatkan sebagai garis pertempuran berat dan serangan Konfederasi besar-besaran menimpa mereka sepenuhnya.Beberapa pria berhasil melepaskan satu atau dua tembakan sebelum melarikan diri.Sepasang artileri di ujung garis Korps XI ditangkap oleh Konfederasi dan segera menyerang pemilik sebelumnya.Divisi Devens runtuh dalam hitungan menit, dibanting dari tiga sisi oleh hampir 30.000 Konfederasi.Kolonel Robert Reily dan Ohio ke-75 berhasil melawan selama sekitar sepuluh menit sebelum resimen itu hancur dengan 150 korban, termasuk Reily sendiri, dan bergabung dengan massa yang melarikan diri.Kolonel Lee kemudian menulis dengan sinis, "Lubang senapan tidak berguna jika musuh berada di sisi yang sama dan di belakang barisan Anda."Beberapa pria mencoba untuk berdiri dan melawan, tetapi mereka dihancurkan oleh rekan-rekan mereka yang melarikan diri dan hujan peluru Konfederasi.Mayor Jenderal Carl Schurz memerintahkan divisinya untuk beralih dari garis timur-barat ke utara-selatan, yang mereka lakukan dengan ketepatan dan kecepatan yang luar biasa.Mereka melawan selama sekitar 20 menit dan "Leatherbreeches" Dilger berhasil mengusir Konfederasi dari jalan tol sebentar dengan senjatanya, tetapi beratnya serangan Jackson juga membuat mereka kewalahan, dan mereka segera harus melarikan diri.Kekacauan yang terjadi di kanan Union tidak diperhatikan di markas Hooker sampai akhirnya suara tembakan terdengar di kejauhan, diikuti oleh gerombolan pria dan kuda yang dilanda kepanikan mengalir ke tempat terbuka Chancellorsville.Seorang petugas staf berteriak, "Ya Tuhan, mereka datang!"saat massa berlari ke dan melewati rumah Kanselir.Hooker melompat ke atas kudanya dan dengan panik mencoba mengambil tindakan.Dia memerintahkan divisi Mayjen Hiram Berry dari Korps III, dulu divisinya sendiri, maju, berteriak "Terima mereka di bayonet Anda!"Artileri di sekitar tempat terbuka mulai memindahkan senjata ke posisinya di sekitar Pemakaman Fairview.^[11]Sementara itu, di Hazel Grove, Kavaleri Pennsylvania ke-8 sedang bersantai dan menunggu perintah untuk mengejar kereta wagon Konfederasi, juga tidak menyadari runtuhnya Korps XI.Komandan resimen, Mayor Pennock Huey, menerima pemberitahuan bahwa Jenderal Howard meminta kavaleri.Huey membebani anak buahnya dan menuju ke barat sepanjang jalan tol, di mana mereka langsung berlari ke divisi Robert Rodes.Setelah pertarungan yang membingungkan, Kavaleri Pennsylvania ke-8 mundur ke tempat yang aman di tempat terbuka Chancellorsville dengan kehilangan 30 orang dan tiga perwira.^[11]