Оккупация, сама по себе кошмарная, отяготилась для Кароля потерей отца, который скончался в феврале 1941 года. Кароль-младший не застал его смерти — он работал в каменоломне. Когда он вернулся, по обыкновению заскочив по дороге к знакомым, чтобы взять обед и лекарство для болевшего отца, тот был уже мертв. От горя Кароль чуть не сошел с ума. «Меня не было, когда умерла мать, не было, когда умер брат, и даже теперь, когда умер отец, меня снова не было», — твердил он