1960年代李富搬離衙前圍村，全家入住公務員宿舍。當年母親和弟弟仍在衙前圍居住，直至1980年代才出售住屋。遷離後李富和妻兒仍每天在村食晚飯，下午妻子攜兒子放學回村，幫忙做家務和煮食，晚飯後才回宿命入睡。1980年李富一家遷離公務員宿舍，搬入現時的彩雲邨單位。李富離開鄉村多年，居住環境不斷改善，完全沒有適應問題。衙前圍的屋沒有廁所，要用痰罐如廁，每日清早倒夜香；宿舍和屋邨有廁所，衛生條件大為改善。早年衙前圍居民每天到水井擔水沖涼，附近七層大廈落成後，改用大廈水喉水，然後煲水沖涼，李富搬至宿舍和屋邨後，改為使用石油氣和煤氣爐，熱水供應更方便。