Karel werd geboren in 1728 in Alveringem en zijn doop had plaats op 4 maart 1728.1 Karels vader was Petrus Gombert en zijn moeder was Maria Francesca Sampers. Hij had drie broers en een zus, genaamd Pieter, Jan, Jan en Maria. Hij was de jongste van de vijf kinderen.