Stone kæmpede i store borgerkrigskampe ved Savage Station.
Antietam, Chancellorsville og Gettysburg. Efter at have lidt et alvorligt sår ved Antietam, blev han udnævnt til andenløjtnant. Efter sit tredje sår ved Gettysburg blev han udstationeret til en administrativ stilling i Philadelphia.