即使女兒在1815 年12 月10 日出生，仍然挽救不了這段婚姻。拜倫以心愛的同父異母姊姊的名字，為女兒取名為奧嘉絲塔．愛達．拜倫。拜倫夫人確信丈夫不忠後，從此都稱女兒為「愛達」。五個星期後，安娜貝拉打包行李，帶著小嬰兒愛達逃回娘家。愛達從此再也沒見過父親。拜倫夫人寫了幾封工於心計的信給拜倫，威脅要公開他疑似亂倫的行徑和同性戀情，希望藉此達成分居協議，並取得女兒監護權（她因此獲得「數學界的米蒂亞*」的名號），拜倫因此離開英國，遠走他鄉。
愛達—理性與浪漫的結合
拜倫夫人下定決心，絕不讓愛達變得像父親一樣，其中一個辦法就是要愛達苦讀數學，彷彿數學是對付詩意想像的解藥。愛達在五歲時顯露出對地理學的偏愛後，拜倫夫人就下令增加更多算術課來取代地理課，家庭教師很快就驕傲的報告：「她能把五、六行數字加起來，計算出正確數字。」儘管如此，愛達仍然逐漸顯露父親的某些劣根性。她十幾歲時，就和家庭教師偷偷談戀愛，被逮到後，教師遭掃地出門，愛達則試圖離家與老師私奔。除此之外，愛達情緒起伏很大，身心深受不同疾病所苦。
愛達認同母親的信念：浸淫在數學中，有助於馴服她拜倫式的傾向。結束和家庭教師的危險關係後，愛達在十八歲時因深受巴貝奇差分機啟發，自行決定學習一系列新課程。她寫信給新教師時提到：「我不能只想快快樂樂、心滿意足的過日子，我發現唯有密切投入具科學本質的科目，才能防止我天馬行空的想像⋯⋯ 對我而言，首要之務似乎是研讀數學。」教師也同意這帖藥方：「妳說得對，目前高度智識性的學習是妳的主要資源和最佳防護。因此，最適合妳的科目莫過於數學。」教師開的處方是歐幾里得幾何學，加上三角函數和代數。師生倆都認為，對太過浪漫、擁有強烈藝術熱情的人而言，這帖藥方應能見效。
拜倫夫人曾帶愛達到英國中部的工業區旅行，愛達親眼見識到新工廠和新機具後，燃起對技術的濃厚興趣。尤其令她難忘的是自動織布機能利用打孔卡，指揮機器創造出想要的花樣，她把機器作業的方式素描起來。當時盧德派份子由於恐懼新技術危害人類，執意搗毀這類織布機，她的父親拜倫在上議院發表著名演說時，還特地為盧德派辯護。但愛達卻以詩意的眼光看待一切，而且從中看到了這類機器日後與「電腦」的關聯。「這種機器令我想到巴貝奇和他的機械論。」
當時，索麥維（Mary Somerville）是英國極少數的著名女性數學家兼科學家之一，愛達見到她之後，對應用科學的興趣進一步被激發出來。索麥維當時剛完成她最偉大的著作之一《論各物質科學間的關聯》（On the Connexion of the Physical Sciences），她在這部劃時代的巨著裡，把天文學、光學、電學、化學、物理學、植物學和地質學的發展連結起來， * 為當時各種非凡的努力與科學發現，提供了統一的見解。她在書中開宗明義的說：「尤其在過去五年，現代科學逐漸傾向於簡化自然律，以通用法則來統合原本互不相干的分支，在這方面有驚人進步。」
