我们估计孙先生逗留最久的其中一处，是他渡过五年大学生涯的香港西医书院原址。 香港西医书院便是1911年成立的香港大学前身，早期附设於荷李活道及鸭巴甸街交界的雅丽氏利济医院内，毗邻道济会堂。雅丽氏医院是香港最早期的西医院之一，以本地华人为服务对象，由一班华洋绅商及伦敦传道会筹办，当中以大律师兼医生何启最投入，他将英籍妻子的遗产捐作筹建医院的全部经费，故此医院以其妻雅丽氏命名。

医院於1887年启用，何启等人认为培育华人西医非常重要，於是得到港督支持，并请到当时的大清直隶总督李鸿章为荣誉赞助人，向各界筹款开办附设於院内的西医书院，同年开校，成为香港第一间专上学院。雅丽氏医院设门诊丶外科丶内科及眼科，可容纳八十名病人，除医院设施外，内设有西医书院的课室丶图书馆及学生宿舍。

1887年，在广州博济医院习医的孙先生得知香港西医书院开校，考虑到新校的课程按英国医学院学制订立，及香港的学历会具较好国际认受和接触到更多元文化，於是便回港报读，成为第一届十二名学生之一，修读五年後毕业。