Jakob wurde geboren am 17. Februar 1866. Jakob's Vater war Jakob Ruffing und seine Mutter war Maria Sutter. Seine Großeltern väterlicherseits waren Jakob Johann Ruffing und Maria Eisel. Er hatte zwei Brüder und eine Schwester, mit Namen Ludwig, Fritz und Maria. Er war der zweit Älteste von den vier Kinder.