首頁 風生活 Google又創超神技術!在超吵派對「關掉周遭雜音」,讓你只聽你想聽的聲音,耳根好清淨!
Google又創超神技術!在超吵派對「關掉周遭雜音」,讓你只聽你想聽的聲音,耳根好清淨! Google研究人員,利用深度學習、影像模型打造出一套系統,能夠辨識出畫面中說話人物的聲音,依照需求強化特定人士的聲音,消除其他人聲、環境音。(圖/截自youtube)
人類有一項特殊的能力,能夠在眾多吵雜的聲音中,辨識出我們熟悉、想聽的聲音,「過濾」掉其他雜訊,專注在說話的對象上,而機器要做到這樣的程度,在過去一直被認為是一件相對困難的事。
最近Google研究人員,利用深度學習、影像模型打造出一套系統,能夠辨識出畫面中說話人物的聲音,依照需求強化特定人士的聲音,消除其他人聲、環境音,這項功能將來可以應用在多人的電話、視訊會議中,或者在多人爭辯的政論節目中,幫助我們清楚聽見特定人士的觀點。
利用深度學習,分離不同聲音來源
「人們很擅長在吵雜的環境中,將注意力放在特定的人身上,心理上將其他人與背景聲音靜音。」Google軟體工程師Inbar Mosseri 、Oran Lang認為,這是人類一項先天的能力,可以將眾多聲音區分成各種音源,但過去許多研究都認為,這對電腦來說仍是一項重大挑戰。
根據最新一份叫「Looking to Listen at the Cocktail Party」研究,研究人員透過深度學習,同步分析影片中的影像與聲音,能單從說話者的臉部表情,就辨別出是誰在說話,觀眾只要點選畫面中特定人臉,就能聽見想聽的聲音來源。研究人員使用10萬支、總長度達2,000小時的單一講者影片,訓練系統辨識個別聲音,接著混入其他影片增加背景雜音,一步一步教懂AI辨別不同音軌,最後會產生一套模型。
完成訓練後,這套系統只要偵測到任何影片中有嘴巴在動,系統會去抓取該來源的音檔,並將其他雜音去除。而這套系統之所以厲害,是因為不僅可以去除環境中的雜音,更可以在多人大聲、激烈交雜談話的同時,還能將目標的聲音細緻地分析出來 ,即便過程中說話的人麥克風不小心遮住嘴型,這套系統依然可以不受干擾的執行。
聽清楚想聽的意見,政論節目將能改善閱聽品質 Google表示,目前仍在探索一切應用的可能,「我們相信這項軟體可以有許多應用,特別是在有許多人說話的吵雜環境,例如增強影片聲音辨識、視訊會議、改良助聽器。」
若這項軟體真的普及,將能改善許多生活中痛苦的經驗,Google可以將這套軟體導入自家Hangouts、Duo這類語音視訊軟體,多人會議時就能過濾背景雜音,增加理解效率,甚至也能改善傳統助聽器無法分離聲音的缺點,未來自動翻譯軟體也能因此受惠。
Google官方釋出了一段影片,畫面中兩位主播激烈的針對議題爭論,聲音重疊時幾乎難以聽清楚任何一方的意見,透過軟體強化左邊主播聲音後,就能清楚聽見單方意見。台灣今年是選舉年,各種議題的辯論將會大量出現,不論是電視政論節目、廣播、網路直播、Podcast,往後若能應用這套軟體,想必能幫助更多閱聽人舒服、有效率的,吸收各種不同的討論內容。
更多新聞請搜尋🔍風傳媒
因為你,我們得以前進,你的支持是我們的動力
贊助風傳媒
更多文章
張麗善推麥寮港改制全國公投 「雲林子弟」蔣萬安支持 國民黨雲林縣長參選人、立委張麗善推動「麥寮港改制成雲林國際工商綜合港」公投案,今(19)日宣布完成第1階段連署,送交近4000份連署書至中選會。立委蔣萬安也表達力挺,呼籲不分朝野黨派共同支持,帶動當地產業轉型及增加就業機會。
MLB》洛杉磯第二大報:林子偉是台灣棒球領頭羊 《洛杉磯每日新聞報》給了林子偉這樣的稱號:「台灣棒球的領頭羊」,不過林子偉目前並不認為他能夠被稱作領頭羊,林子偉說:「語言跟生活完全是兩碼子的事,在飲食方面我還能夠應付,不過語言對我來說真的很困難,2年前我甚至認為我根本做不到,這對我的生活來說是一大障礙;不過我想對年輕人說,既然我可以做到,那你們也可以。」
「空污不會分台北、新北」 朱立倫籲柯文哲一起關注深澳電廠 雙北合作交流平台第4次市長層級會議,今(19)日上午在台北市府召開,台北市長柯文哲、新北市長朱立倫一同走進會場,不過雙方互動不算熱絡。對於近期備受關注的深澳電廠議題,朱立倫在致詞時向柯文哲喊話,希望雙北一定要合作,空污不會分台北、新北。
金正恩與文在寅握手看得到!兩韓板門店峰會將對全球現場直播 南韓總統文在寅與北韓(朝鮮)國務委員會委員長金正恩27日在板門店舉行歷史性會談,目前籌備工作正緊鑼密鼓進行。南韓總統府青瓦台方面18日表示,兩韓當天在板門店就領導人會談的禮賓、警衛、報導等事宜進行第二次籌備工作會談,就向全球現場直播文在寅和金正恩握手等主要環節達成協議。
張震遭坎城影展列為中國籍 經紀公司:他祖籍浙江,生於台北 第71屆法國坎城影展主辦單位昨(18)日公布競賽片評審團名單,台灣演員張震入列,但國籍卻被列為中國。對此,張震的經紀公司澤東電影昨夜發布聲明,表示張震祖籍浙江,生於台北,坎城影展的評委介紹,是以張震從影經歷作為出發點,概括他作為一個演員成長的經歷,以及個人的文化傳承。
建教生不得夜間8時至晨間6時受訓 陳宜民盼「彈性」處理:我不信學生回去在休息! 「晚上8點還有很多客人,這也沒學到東西啊,對學生來說……我不相信學生8點下班以後,回去真的是在休息!」暑期實習打工季將至,今(19)日衛環委員會,國民黨籍立委陳宜民表示,目前教育部之《建教生權益保障法》規範學生不得在夜間8時至晨間6時間受訓,造成部份業者如鼎泰豐表示要砍掉實習名額,讓學生少掉月薪3萬元實習機會,盼開放「彈性」。
NBA季後賽》詹姆斯飆分模式 騎士扳平戰局 克里夫蘭騎士季後賽面對東區第5的印第安納溜馬,保有主場優勢的騎士第1戰居然在首戰敗給溜馬陷入落後,比賽的內容也不是非常理想,不僅中止詹姆斯(LebronJames)在身披騎士戰袍後季後賽首輪連勝,各界也對騎士是否能再度闖進冠軍的可能存疑,但第2戰詹姆斯徹底喚醒隊友,100比97擊敗溜馬,扳平系列戰。
今天高溫超過30度 23日又變天 中央氣象局預報員張承傳表示,今(19)日氣溫回升,到22日都是晴朗穩定的好天氣,高溫可以達到攝氏30至33度;23日有鋒面通過,東北季風南下,中部以北有局部大雨。
妳願意跟機器人發生性愛嗎?如果,男性愛機器人「硬上」女主人怎麼辦? 第一台男性機器人於2018年上市販售,售價約10,000英鎊(約新台幣41萬9,628元),但是性愛機器人技術延伸出的社會道德議題相當具有爭議性,若是男性愛機器人,在未得到女性人類允許的情況下而「硬上」,強制發生性行為,那麼受處罰的應該是犯罪的機器人本身,還是賦與機器人行為能力的研發者呢?
侯友宜被質疑過去「專抓異議人士」 段宜康:被迫面對不堪回首歷史 從強灌盧修一催淚瓦斯到拘捕鄭南榕,國民黨新北市長參選人侯友宜被質疑過去「專抓異議人士」。民進黨立委段宜康19日在臉書貼文直指,台灣社會對這些人很寬容、不曾追究,但侯友宜現在參選就得面對自己不堪回首的歷史,段宜康也順便酸了前總統陳水扁拔擢侯友宜「不值得大驚小怪」。
NBA季後賽》詹皇又「開無雙」? 首節20分超越溜馬全隊 第一場面對印第安那溜馬時,由詹姆斯(LeBronJames)領軍的克里夫蘭騎士終場以80比98慘敗,而當記者在賽後問到詹姆斯的看法時,詹姆斯淡定的說:「現在只是季後賽第1輪而已,我們也只輸了1場比賽,過去我已經從總冠軍賽1比3落後時逆轉了,我認為我應該是你們最不該問這種問題的人。」
蘇貞昌競選團隊佈局 陳明文證實:蘇希望協調陳菊出任主委 前行政院長蘇貞昌將再戰新北市,目前鎖定由準總統府秘書長陳菊擔任其競選總部主委。民進黨選對會召集人、立委陳明文今(19)接受廣播專訪證實此事,但尚未定案,蘇盼黨可協調由陳擔任主委,「大概是有這種想法」;被問及總幹事是否由選對會另名召集人林錫耀出任,陳則說,目前是這樣規劃。
宣布制裁俄羅斯被打臉》海莉與川普分歧浮上檯面,下個被拔官的會是她? 對於敘利亞政府軍使用化學武器攻擊杜馬鎮百姓,美國總統川普先前推文警告,要敘利亞的靠山俄羅斯與伊朗付出沉重代價,而美國駐聯合國大使海莉更預告,美國會祭出新制裁,結果白宮隨即出面否認,新任白宮經濟顧問柯洛德17日稱,海莉「超前」決議,「偶爾會有搞不清楚狀況的時候」,海莉立刻回嗆,柯洛德則致歉,「我說錯話了,完全說錯了」。
日出香榭大道工程遭中央卡關 傅崐萁蕭美琴花蓮王不見王 花東地區從過去以來,一直是民進黨的艱困選區,2016年民進黨立委蕭美琴首度拿下花蓮區域立委,花蓮縣長傅崑萁與蕭美琴之間,即呈現緊張關係,由於綠營執政後,花蓮縣政府從中央爭取的6.37億元「日出香榭大道」等建設計畫卡關,傅蕭二人在公開場合幾乎「王不見王」,有時候花蓮縣當地民間單位舉辦活動,還得刻意將二人時間錯開,以免遭到池魚之殃。
溫泉水權被廢止!理想大地後續開發 賴清德訪花蓮也關切 行政院長賴清德14日親自南下花蓮,希望藉此提振地震後的花蓮觀光業,不過,行政院隔天舉行媒體早餐會地點「理想大地度假村」,卻頗具政治意涵,由於該公司負責人梁清政,與花蓮縣長傅崑萁,為了理想大地賣地案纏訟6年,理想大地的溫泉標章,去年9月遭到花蓮縣政府廢止,讓後續的開發案再度蒙上陰影,賴揆與梁清政會晤過程,認為花蓮有能力爭取日、韓高階觀光客入住,會中並且談及理想大地高爾夫球場後續開發可行性,由於理想大地賣地案,是民進黨花蓮縣長候選人劉曉玫選戰主軸,賴揆與梁清政的會晤,讓外界頗具想像空間。
風評:小英糾結核電,蔡政府官員只能練肖話 因為深澳電廠案吹皺一池春水,近期各界談能源、供電談得特別多;小英總統在接受媒體專訪時,還責怪前朝「糾結於核能」才讓今日的能源轉型痛苦。但小英總統顯然不知、或忘記、亦是蓄意不談:正是她糾結在核能(全面廢核),才發生今天的能源困境,逼得蔡政府官員紛紛「練肖話」,盡講一些錯誤、可能連自己都不相信的話。
鍾文榮觀點:央行總裁報告,內需不振,何須解密? 天下雜誌在近期刊登一篇「央行解密,台灣為什麼從亞洲四小龍脫隊?」,內容提到現任央行楊總裁認為臺灣經濟成長有兩大失落,第一個是民間消費嚴重下滑,第二個是民間投資不振。單就第一個失落原因「內需不振」,楊總裁歸納出三項原因,分別是「薪資成長緩慢」、「少子化與人口老化」,以及「國人赴海外工作人數增加」。然第一個失落原因,分明就是個明顯的事實,楊總裁又何須故做神秘而解密呢?
陳述恩觀點:用臉書治國,用網路資料審查台大校長? 教育部與臺大校長選任之間「卡管連續劇」每日一爆,最新集數演到教育部長辭職,加上爭議一籮筐的新部長迅速出爐,頗符合臺灣電視劇的公式:「攏係假欸」。但這齣戲演的實在不好看。作為「看戲的人」之一,我們忍不住想要提出幾個令人擔憂的發展。
王宗偉觀點:去對岸教法律教經濟與教超導材料,誰對台灣最危險? 今年剛好是中國改革開放40周年,在中國改革開放的起點除了經濟特區以及開放承包制以外,有非常重要的一個進程,就是在吸引外資的同時,敷設一套與西方國家的法制可以間接或直接接軌的法治系統。因為如果法治體系不明確,投資者的財產可能被侵犯,自由與生命被違法剝奪,遭受到無可回復的損失。誰會到這麼一個無法預期後果的地方投資呢?1997年的美國電影「紅色角落(Red)」就描述了,由李察吉爾飾演的一個到中國做生意的美國商人,捲入一起殺人案差點冤死中國的故事。
楊雅雲觀點:投資人和你想的不一樣!三分鐘搞懂影響力投資的全球趨勢 綠色創業家社群每次小聚討論投資相關議題時,我們兩位作者的對話就會像鬼打架。我們其中一人開始談賺錢,另一個人就會開始講大道理,舉凡節能減碳、環境效益、品牌、社會影響力、信任感、愛與關係,甚至靈魂都可以搬出來講,直到講賺錢的那個人很煩了,就會說:「我覺得這些真的都很重要,那他們有讓你賺到錢嗎?」
吳典蓉專欄:蔡英文是好主席 可惜考題卻是好總統 蔡政府執政聲望受挫原因很多,其中一部分是來自綠營支持者的失落,他們總覺得蔡英文不夠堅持民進黨的理想;然而這卻是大大的錯怪蔡英文,從黨派的角度而言,蔡英文堪稱不錯的主席,只是,好主席卻未必是好總統,這才是當前最大的問題所在。
觀點投書:賴清德「務實台獨論」只是包裹糖衣的毒藥 行政院長賴清德在16日再度重申自己是「台獨工作者」,更以「務實」二字框架,大方對台獨理念侃侃而談,卻引起中國大陸在18日於福建沿海進行針對性的實彈演練,其一昧的滿足自己台獨言論,來換取未來的政治利益,不但手法粗糙,更是置國人在戰爭邊緣於不顧。
蕙嘉琳觀點:高度串連正顛覆亞洲物流市場 連結度正在改變亞太區以至全世界的商業面貌。現在,先進技術已讓全世界前所未見的緊密連結,即使我們察覺不到它的存在,這股連結的動能仍持續擴散,在日常生活的各個面向發揮效用。舉例來說,我們感覺不到城市裡監測交通、空氣品質和噪音等感測器的存在,但這些技術卻是提升永續發展、城市效率和生活品質的重要資訊。
觀點投書:年改那把尺何去何從,請政府說分明 4月12日行政院院會通過了一個高達95%(90%)令人唏噓不已的軍改草案。我國軍公教退撫制度上給付權益向來一致,與美國不同,對一起參加退撫計畫被砍至僅有62.5%的公教而言,政府年改如此乖違誇張,不公不義不平不仁豬狗不如的對待,咸表悲憤。說明如下:
觀點投書:學法的蔡總統,請勿剝奪了軍公教警消的生存權! 詳列憲法的功能不是本文的目的,本文只談一個功能:「保障人民權利不被政府剝奪」,尤其是在蔡總統主導下、願意承擔最後責任下的「年金亂改」,就是嚴重剝奪、限縮了軍公教警消退休(役)後的工作權,也就等同於剝奪了憲法第十五條「人民之生存權、工作權及財產權,應予保障。」所明示的基本人權!
從三架零戰奇襲,窺見當時日本充滿絕望:《敗戰的勇者》選摘(3) 拉包爾是浮在南太平洋新不列顛島(NewBritain)上的港市。日軍於太平洋戰爭開戰後沒多久的昭和十七年(一九四二年)一月底佔領該島。二月後,零戰、陸攻隊(即轟炸機隊)甚至是飛行艇與水偵陸陸續續進出拉包爾,強化其攻守機能。之後,以阪井三郎為首、擁有許多王牌飛行員的「台南海軍航空隊」(簡稱台南空)也抵達該地,每天不斷地與盟軍交鋒。
鮪魚變黃金!台灣鮪魚捕撈量世界第一 年出口達208億元 台灣遠洋漁業創造的經濟產值相當高,占總體漁業產值44%,遠洋漁船隻數更位居全球之冠,其中「魚類及其製品」是台灣最重要的外銷農產品,台灣鮪魚的捕撈量達世界第一,台灣前五大出口水產中,有四類由遠洋漁業包辦,其中以鮪魚最高,每年為台灣貢獻7.06億美元出口值。
控訴吳茂昆自加年薪近500萬元 東華教授明擬提告貪污 準教育部長、前東華大學校長吳茂昆將於明(19)日上任,但卻陸續被揭露溢領獎助金、濫用職權等爭議。東華大學教授王純娟指出,吳茂昆上任東華校長第一個學期開始,在自己擔任會議主席的「學術獎助評審委員會」提案自加年薪高達近500萬,為期至少3年,比起國立大學校長法定年薪190萬元高出許多。王純娟也表示,將在明天上午前往台北地檢署控告吳茂坤涉嫌《貪污罪》。