Julius Caesar Chappelle được sinh ra trong chế độ nô lệ vào năm 1852 tại Chappelle's Landing, một đồn điền gần Edgefield, Newberry County, Nam Carolina, với một người mẹ nô lệ. Ông được phân loại là một "mulatto", rõ ràng là chủng tộc hỗn hợp, có tổ tiên châu Phi-Âu. Trong số anh chị em của ông là anh em Lewis và Mitchell.