拥有香港大酒店丶太子行丶皇后行丶亚历山大行等等顶级建筑的遮打对住就当然要求过人,1869年遮打於半山干德道一号以全云石兴建一所巨宅,定名云石堂。云石堂以意大利入口云石兴建,全屋墙壁丶支柱丶楼梯皆为云石打造,室内放满各式私人珍藏艺术品,包括今日广为人知的「遮打藏画」系列;室外则兴建了一个两亩花园,栽种了各式热带植物,俨於一个私人的香港植物公园。不过,如此超豪华的云石堂却只是遮打其中一座府第而已,他大部份时间生活在比不上云石堂般豪华的坚道及九龙大宅,至1925年才迁入云石堂长居,但却於次年逝世。

若阁下对云石堂有兴趣,就一定要赶於遮打在生时通知我跟他洽购,否则会後悔莫及!因为他是香港最阔绰的慈善家之一,认为自己的财富属於香港社会,每每向政府及民间大手捐助,於是立下遗嘱死後将云石堂及「遮打藏品」等多项资产无条件送给香港政府。港府接收云石堂後,於1935年安排作皇家海军的军官府第,二战时这座豪宅受战火破坏,最後於1953年拆卸,改成为一座平平无奇的政府宿舍,取命遮打堂。