Sebaik mendapat seorang cahaya mata keluarga ini telah berhijrah ke Melaka dan seterusnya ke Banting, Selangor kerana penghidupan di Singapura tidak menjaminkan masa depan ekoran perang dunia kedua dan penaklukan Singapura dan Malaya oleh tentera Jepun.
Sepanjang penghidupan beliau suami isteri selama 27 tahun, mereka telah memperolehi seramai lima belas orang anak yang terdiri daripada 8 lelaki dan 7 perempuan. Pada tanggal 14 Mei, 1969 suami tercinta telah kembali ke Rahmatullah ketika berusia 49 tahun dan meninggalkan Hajjah Patimah binti Osman sebagai balu pada usia 39 tahun dengan 15 orang anak tanpa wang ringgit atau sebarang harta benda. Berkat ketabahan dan semangat kental serta tanggungjawab yang berat demi mencari sesuap nasi untuk anak-anak, Hajjah Patimah telah melakukan perbagai kerja termasuk menjual kueh, nasi lemak, mengambil upah mencuci pakaian orang dan berbagai-bagai lagi kerja yang boleh mendatangkan pendapatan.
Pada masa ini Hajjah Patimah binti Osman tinggal bersama anak bungsu dan menantu serta dua orang cucu di alamat:
No. 3, Lorong Merpati 10,
Taman Setia Jaya,
42700 Banting, Selangor.
Tel: 03-31872461