Floyd je preživel otroštvo na družinski plantaži Fairfield v okrožju Camden. Ko je zrel, je šel po očetovih stopinjah, služil je kot kapitan gruzijskih vojakov v
Druga vojna Seminola in vstop v javno službo kot šerif okrožja. Po drugi vojni Seminola se je Floyd preselil v St. Augustine na Florido in delal kot risar, preden se je preselil na plantažo v okrožju St. John na Floridi.