El ataque comenzó alrededor de las 5:30 am apoyado por la artillería recién instalada en Hazel Grove y por ataques simultáneos de las divisiones de Anderson y McLaws desde el sur y sureste.Las tropas de la Unión resistieron ferozmente a los confederados detrás de fuertes movimientos de tierra, y la lucha del 3 de mayo fue la más dura de la campaña.Las oleadas iniciales de ataques de Heth y Colston ganaron un poco de terreno, pero fueron rechazadas por los contraataques de la Unión.^[15]Rodes envió a sus hombres al final y este empujón final, junto con el excelente desempeño de la artillería confederada, llevó a cabo la batalla de la mañana.Chancellorsville fue la única ocasión en la guerra de Virginia en la que los artilleros confederados tuvieron una clara ventaja sobre sus homólogos federales.Los cañones confederados en Hazel Grove se unieron a 20 más en Plank Road para batirse en duelo de manera efectiva con los cañones de la Unión en la vecina Fairview Hill, lo que provocó que los federales se retiraran cuando las municiones se agotaron y los soldados de infantería confederados eliminaron a los cañones.^[dieciséis]