Swayze v knjigi The Time Of My Life piše, da mu je zelo žal, da ni nikoli postal oče. Njegova žena Lisa je v tretjem mesecu nosečnosti nenadoma splavila, in čeprav sta si močno želela naraščaja, jima ta ni bil usojen. "Zelo sem si želel postati oče. Imeti otroka z žensko, ki jo tako ljubim. In hotel sem biti dober oče, takšen oče, kot je bil moj," je zapisal pokojni igralec in dodal, da ga je spontani splav zelo potrl. "Žalost je bila uničujoča. Izguba je bila tako velika, da nekaj časa nisva poskušala zanositi. Govorila sva si, da imava še veliko let. Čez čas sva spet poskusila in upala, da nama bo uspelo, a nama ni.“
Patrickovo največje obžalovanje
V javnost prihaja vedno več odlomkov iz Swayzejeve biografije. V enem poglavju je igralec govoril tudi o svoji neizpolnjeni želji.