Atak rozpoczął się około 5:30 rano, wspierany przez nowo zainstalowaną artylerię w Hazel Grove oraz jednoczesne ataki dywizji Anderson i McLaws z południa i południowego wschodu.Wojska Unii stojące za silnymi robotami ziemnymi stawiały zaciekły opór Konfederatom, a walki 3 maja były najcięższymi w całej kampanii.Początkowe fale ataków Hetha i Colstona zyskały niewielką przewagę, ale zostały odparte przez kontrataki Unii.^[15]Rodes wysłał swoich ludzi jako ostatni i ten ostatni atak, wraz z doskonałymi wynikami artylerii Konfederacji, zakończył poranną bitwę.Chancellorsville było jedyną okazją w wojnie w Wirginii, w której strzelcy Konfederacji mieli zdecydowaną przewagę nad swoimi federalnymi odpowiednikami.Do dział Konfederacji na Hazel Grove dołączyło kolejnych 20 na Plank Road, aby skutecznie pojedynkować się z działami Unii na sąsiednim Fairview Hill, powodując wycofanie się Federalistów, gdy skończyła się amunicja, a piechota konfederatów wybrała załogi dział.^[16]