戴笠為什麼這麼拼命呢？因為他想追求胡蝶。傳說他為了安慰胡蝶，還讓人依照胡蝶的敘述，特地去國外買一些舶來品，包括珠寶、香水、化妝品、名牌服飾等。這是香港的貴婦人才有的東西。
胡蝶是明白人，這些東西太新，本不是她用過的，因此知道這是戴笠的用心。他明白表示追求。有一傳說是，胡蝶應邀赴戴笠宴請，餐後戴特意留下她，送給她一顆大鑽戒。胡蝶知道不能輕易答應，便回覆說：「我已經結婚了，不能接受這麼貴重的禮物。」
卻不料戴笠說：「你不用擔心。我也幫你先生安排了出路。我會照顧你們的。」
胡蝶回去一問，她先生潘有聲說，戴笠已經安排他去昆明任職，做貿易生意。「戴先生的安排，我能不去嗎？不去還能有命活著嗎？」
胡蝶夫婦至此被拆散。一在昆明一在重慶。因此外界一直傳說，戴笠將胡蝶「金屋藏嬌」，養了起來。說得胡蝶有如被關在籠子裡的金絲雀。但事實上，胡蝶在重慶還是可以有自己的活動。她可以出來應酬交際，接受邀請出外拍電影。
有一位學者因此做翻案文章認為，她是自由的，胡蝶根本沒有被戴笠金屋藏嬌。還可以出來應酬，接拍電影。然而，這恐怕是由於他不了解權力運作的本質與戴笠權勢的通天可以到達什麼程度，才會如此天真。
恰恰相反的是，她的自由，都是在戴笠的籠子裡的自由。設想，邀請她拍電影的電影公司如果沒有得到戴笠首肯，敢拍嗎？在戴笠控制下的重慶，拍得成嗎？而胡蝶如果沒有問過戴笠，敢答應嗎？戴笠想贏得的，是美人心，而不僅是肉體。他要的一隻飛翔在天空，讓天下人看見、艷羡、最美的金絲雀，最後，那美麗的金絲雀會飛回到他的手中，這才是他要的。
所以他也不會將胡蝶封鎖起來，而是讓她成為一個更有聲名，更有權勢的人，可以在重慶呼風喚雨，讓她習慣這種生活作風，就更無法擺脫對權勢的依賴，唯有對他百依百順，最後心甘情願成為他的女人。這才是戴笠要的。
應該說，胡蝶也是一個非常聰慧、手段靈活而深諳世情的女子。她審時度勢，若是違逆了戴笠的意，不給他面子，隨時會出事，甚至被暗殺都無處申冤。她的丈夫更可能會因為戴笠的憤怒嫉妒，生命危險。與其如此，不如虛以委蛇，保持情面，與戴笠保持往來，甚至接受他建的別墅，但另一方面又不答應他的求婚。至於何時同意結婚，胡蝶大可以用「丈夫不同意離婚」，或以「唯有抗戰勝利，才願意結婚」為由（這理由在抗戰時期，盛行一時），把戴笠掛在得與不可得之間。似得而未得，這才是對付戴笠的最好辦法。否則真正得到了，他從來也不曾珍惜。這一點，老於世故的胡蝶不會看不透。
