除了菜園和養雞的事業，夫婦倆共同培植一座花園，種滿漂亮的鮮花，養了一隻黃色幼犬幫忙看守，兩人閒暇時便會坐在大石頭上，望著微風吹拂的草木，靜靜地野餐。就這樣，張學良在此度過無數個日出、日落，心情逐漸平靜下來。據他所說：
「就算明天槍斃我，今晚我還是能倒頭大睡。」
事實上，張學良不但能睡，還是裸睡，他從小就有裸睡的習慣，即便晚年在榮總住院開刀也堅持不改。由於天天裸睡，他的副官蔣友芳或家管叫他起床前，都得先敲鬥。有很多人勸他不要這樣，會給別人添麻煩，但張學良反倒對他們說教，滔滔不絕講述裸睡的養生好處。
張學良真的把他的「裸之道」貫徹到底，除了裸睡之外，亦崇尚裸泳。井上附近有一條蜿蜒的小河，河水是有溫度的溫泉水，每次想游泳時，他便直接脫光往河邊奔去。那時張學良年近50，拖著一個啤酒肚，實在不怎麼體面，每當山地取水的原住民女子看到此等場面，總是嚇得四散奔逃。
不過，沒有裸泳時，張學良對取水的原住民非常和善。由於軍方命令的關係，張學良不被允許和當地人交流，也不能和他們分享任何食品或器物，否則將被視為通謀，但他有惻隱之心，見原住民生活條件不佳，總有人饑己饑之感，何況在新竹軟禁初期，食衣住行的問題統統是他們伺候，很多時候，張學良會繞個彎投桃報李，例如在原住民孩童戲水打鬧時，將咬了一口的蘋果扔到小河裡，還會把大半隻燒雞、烤鴨扔到水裡。讓這些居於深山的孩子們，也能享受來自摩登大城市的滋味。
來去高雄，來去高雄，來去高雄
後來，張學良搬到高雄壽山，那是一棟兩樓層的白色建築，時人稱之「高雄小白宮」，相比於新竹的木製小屋，鋼筋水泥的屋子顯然舒服許多。張學良生前表示高雄是「二十餘年來最舒適的處所」，有趣的是，或許是因為太舒適，剛搬入後不久，張學良日記出現兩次房事，要知道當時的他已經是56歲的人了：
1957年1月4日記：「今日春性又大發，血氣將衰之人，戒慎為是。」
1957年1月13日：「今天又少年性發，同 Edith（趙一荻）大肆玩弄，將近60歲的人，仍不脫少年稚氣，可喜不知老之將至，可笑老了還不知保重。」
張學良的心情很不錯，文筆相較其他時期輕快許多。由於到達壽山時行色匆忙，張學良把自己的家當和心愛的《明史》全留在井上，他無事可做，每天只能想盡辦法找尋樂子，盡可能過得充實點。「高雄小白宮」從二樓往外眺望可以看到整個高雄港，他就每日早起晨坐觀海，望著港內來來去去的船隻，若有感悟：
海，不管洋船、木舟、竹筏，只要遵循它的法則，它就載，否則它就覆。天命之謂性。道、教不可離者，此中可尋出端倪。「天道無私」，亦在此也。
