De eerste schoten van de Slag om Chancellorsville werden om 11.20 uur afgevuurd toen de legers met elkaar in botsing kwamen.De aanvankelijke aanval van McLaws duwde de divisie van Sykes terug.De generaal van de Unie organiseerde een tegenaanval die het verloren terrein herstelde.Anderson stuurde toen een brigade onder leiding van Brig.Generaal Ambrose Wright een onvoltooide spoorweg op ten zuiden van de Plank Road, rond de rechterflank van Slocums korps.Dit zou normaal gesproken een serieus probleem zijn, maar Howard's XI Corps rukte van achteren op en kon Wright aan.^[3]De divisie van Sykes was verder naar voren gegaan dan Slocum aan zijn rechterkant, waardoor hij in een kwetsbare positie verkeerde.Dit dwong hem om om 14.00 uur een ordelijke terugtrekking uit te voeren om een ​​positie in te nemen achter Hancocks divisie van het II Corps, die door Hooker was bevolen om op te rukken en de Zuidelijke aanval te helpen afslaan.De andere twee divisies van Meade maakten goede vorderingen op de River Road en naderden hun doel, de Ford van Banks.^[3]