1965年7月，李宗仁夫妇回大陆，毛泽东也是在游泳池接见他们，并一起游泳。当时双方恰好开了一个与水有关的玩笑，毛泽东看着李宗仁说：“嘿，德邻先生，你上当了！”李宗仁为之一怔。“蒋介石骂我们做‘匪’，你这一次回来不是误上贼船了吗？”毛泽东说后哈哈大笑，在座的人跟着也笑起来。李宗仁一时不知如何应答，秘书程思远脱口而出：“主席，我们搭上慈航渡登彼岸了。”毛泽东颇为赞许。
人生最后十年除了泳池哪也不去住
1966年上半年，中央办公厅趁毛主席离京外出巡视考察期间，对菊香书屋紫云轩居宅进行一次维修。当毛主席7月18日回到丰泽园后，发现园内所有的房子都修葺一新，大为不悦，一气之下搬到游泳池不肯回来。但游泳池根本没有能供人长期居住办公的房间。毛泽东说：“那个更衣室我看就可以。”
更衣室很狭小条件并不适合，他说：“太小了怕什么，只要能摆个床铺，有张桌子、椅子不就可以了嘛。”最后工作人员只好将游泳池的小传达室略作布置使之成为卧室，休息大厅则成为毛主席的书房兼会客室。泳池没有厨房，饭菜仍在菊香书屋做，再给他端过来。
