Józef Kalinowski urodził się 1 września 1835 roku w Wilnie. Otrzymał staranne wychowanie oraz wykształcenie i został inżynierem wojskowym. Po wybuchu Powstania Styczniowego przyłączył się do walczących i stał się jednym z jego przywódców. Pochwycony przez Rosjan, został zesłany w 1864 roku na dziesięć lat przymusowych robót na Syberii. Po odzyskaniu wolności był wychowawcą bł. Augusta Czartoryskiego.