1941年6月余东璇病逝，几个月後日军侵港。十八天香港保卫战期间，浅水湾不单为交火重灾区，日军更占据浅水湾余园并在古堡内屠杀54名战俘，成为一代「香港凶宅王」。这座堡垒後交由儿子余经纬打理，他热衷电影又与利孝和及邵逸夫创办电视广播及华星娱乐，所以经常借出余园作拍摄电影之用，粒粒巨星经常出入，可谓星光熠熠耀余园！

不久，浅水湾余园一次又一次传出放盘或重建的消息，市场讯息较为混乱，但不要紧，我跟业主相熟，可肯定告诉你1982年浅水湾酒店结业拆卸重建为高级服务式住宅影湾园後，余园亦随後於1984年开始放售，最後拆卸重建为豪华屋苑「浅水湾道56号」，又名为「御苑」以纪念之。