Efter sin tid i Kongressen, genoptog Caruth sin advokatpraksis i Louisville. Han tjente som dommer i den kriminelle afdeling af Jefferson County Circuit Court i 1902. Han fungerede som kommissær for
St. Louis udstilling i 1904. Han døde i Louisville den 25. november 1907 og blev begravet på Cave Hill Cemetery.