誰說人工智慧冷冰冰,絕對奏不出感動樂曲?中研院奇招訓練,結果讓所有人都驚艷

2017-08-08 14:17
人工智慧不僅能取代人力,現在連需要花腦力學習的音樂都能來上一段!(示意圖/Pixabay) 
人工智慧不僅能取代人力,現在連需要花腦力學習的音樂都能來上一段!(示意圖/Pixabay) 

相傳莫札特十四歲時聽到複雜的教堂樂曲,便能默記全曲並寫成樂譜。在這個充滿神秘色彩的故事中,除了隱含人們對音樂「天份」這道門檻的敬畏以外,自動採譜也成為 AI 人工智慧研究者所挑戰的重要夢想。

中研院資訊科學研究所的蘇黎,專攻音樂資訊檢索 (Music Information Retrieval, MIR) ,以「多重音高偵測技術」為基礎,發展出自動採譜的人工智慧,以更輕鬆簡單的方式來協助我們學音樂、理解音樂和製作音樂。

(圖/
自動採譜的功能與發展,讓人人都能開外掛擁有莫札特的絕對音感與解譜能力,可以馬上就編譯樂譜。(圖/iStock,研之有物提供)

目前市場上已經有許多人工智慧在音樂上的應用,例如人們用 Soundhound 音樂識別軟體來搜尋當下聽到的歌,或試聽線上串流平台推薦的歌曲,或透過軟體快速找到自己想要聽的歌。這方面的發展已接近成熟,但主要都是針對「聆聽」的行為。

若想透過人工智慧進一步了解音樂的深層意涵,例如作曲家的創作思維,演奏家的詮釋技法,乃至於樂評家的觀點,那麼,一個擁有像莫札特般卓越音樂聽力,可以協助自動採譜,並將聽見的音樂變成容易親近演奏的完整樂譜的人工智慧,會是關鍵性的一步。

人類如何認識音樂?音高 94 關鍵!

試著哼唱莫札特的〈小星星〉,想起小學教室裡的風琴伴奏,而那架風琴的 Do 還老是走音。在這樣簡單的歌曲裡頭,事實上已經包含了許多複雜的資訊,如速度、節奏、音高、和弦、器樂及人聲的音色等多樣要素,別忘了還有走音的 Do 這個偏差因子。

因此,人工智慧對大編制樂曲如交響樂的自動採譜,必須面對大量且交疊的資訊,難度仍然很高。所以要把聽到的樂曲轉成可以看到的譜,還是要找出其中特徵最穩定,也能決定旋律的關鍵—「音高」。

「音高」為樂曲所有要素中最基本的特徵,樂譜上的資訊,大多與音高有關。

說起音樂訊號的本質,蘇黎認為音高是音樂訊號中的最基本的資訊之一,而音高偵測正是音樂訊號處理的基本技術。

舉個大家都有的生活經驗:當朋友打電話來,有時我們會覺得對方的聲音好像不太一樣。這是因為線路與裝置在訊號傳輸過程中改變了朋友說話的音色,讓我們的聽覺受到混淆。但對方聲音在電話裡的語調,也就是音高,不論是上揚還是下降,並不容易受影響。

因此,我們即使因為雜訊而不認得對方的聲音,但往往還能聽懂對方講話的內容。也因為音高擁有這樣的基本特性,所以如何辨識音高可以說是分析聲音資訊的一項基本技術。

(圖/
從最常使用記載樂曲的五線譜來看,接起每一個音高才會組成一段旋律,若依照標準樂譜所演奏的樂曲中,音高該上揚,還是下降,是不會被演奏者影響及改變。(圖/iStock,研之有物提供)

此外,音高資訊並不僅包含絕對音高,還包含音與音相對的關係,甚至是那轉音之時,各種詮釋的可能。

就如同有人唱著〈小星星〉的曲調,即使沒一個音在音準上,我們仍然聽得出這是〈小星星〉的曲調。這是因為我們認得旋律軌跡 (melody contour) 的樣態,也就是「曲調的起伏」。只要曲調起伏的趨勢與原曲相似,我們就能如 Soundhound 音樂識別軟體一樣聽得出來。 (相關報導: 哈佛大學成功將GIF動圖存在細菌上!核爆、輻射資料都不會消失,未來還可以… 更多文章

用「多重音高偵測」,記錄人耳辨識困難的合音

音高資訊除了表現於旋律以外,更是伴奏、和聲與對位結構中的基本資訊,也就是「和弦辨識 (chord recognition) 」與「多重音高偵測 (multi-pitch estimation, MPE) 」技術。

因為你,我們得以前進,你的支持是我們的動力
更多文章
世大運英文手冊原稱「Taiwan」台北市觀傳局:國際體總改為「Chinese Taipei」
想要克服資訊焦慮? 你其實可以這麼做。
入聯「要有新策略」 呂秀蓮:積極推動台灣人參觀聯合國
餐飲業者推父親節特色料理 供消費者多元選擇
中國和東協外長在「十加一」會議談了啥?
千位親子來「童」樂 新北客家文化與120位寶貝一同過周歲
蔡英文見錢尼 中國官媒侮辱我國元首:奴隸、蟲大母、腰都直不起來了!
「雙方一起找出兩岸互動新模式」蔡英文:致力維持兩岸現狀
2500市民世大運選手村「找碴」 吃泡麵、喝咖啡竟要跋涉「取熱水」
核四都偷發電?台電:定期測試 沒有核燃料哪能發電
金正恩不滿聯合國制裁:絕不放棄核武!美國將付出千倍代價!
大潭藻礁發現一級保育類珊瑚,公民團體籲撤銷「上個世紀」的環評
「立秋」養生之道重「收養」!彭溫雅中醫師:預防秋燥,多吃這些苦味食物降火氣
大學錄取率高達96.92% 缺額3488人創8年新高
奧斯卡影后批評保濕霜沒用!皮膚科專家: 找到適合自己的保濕霜對肌膚有好處
板橋生活講座開講 專家分享旅遊、長照與園藝等議題
還在太陽底下揮手嗎?APP叫車成為快速新選擇
中共十九大前夕喊話,蔡英文盼兩岸用新模式合作
溺水被救上岸後就沒事了嗎?美國醫學專家:需注意這2種現象,切勿延誤就醫
「缺電是人禍」國民黨:把最會挖的顧立雄調去台電挖「電力寶藏」
中國缺席世大運開幕式?世大運執行長:沒收到消息
公家機關冷氣禁令何時解除?徐國勇:預計13日解禁
撲滅限電紅燈,3火力機組確定明天開始試運轉
西非茅利塔尼亞公投廢除參議院 恐淪為下一個極權國家
慣老闆把我一人當兩人用,又死都不幫我加薪…呂秋遠教你這樣開口討應有的薪資
父親節沒吃大餐又怎樣?她細數伴腦傷丈夫找回記憶之路,全家健康才是最真實的祝福
全球財經掃描:美股續創高,Fed官員對通膨提警告,美元盤整
我們的島「中華台北」? 時代力量痛批世大運手冊:什麼鬼
美軍退伍軍人福利佳 有效穩定軍心及振奮士氣
為了省電關冷氣,如果中暑算職災!
兩韓合辦、號稱北韓最開放的學術場域—平壤科大,但教職員卻在學期間逐漸變少是因為…
川普政府若對北京當局發起貿易戰?美國貿易專家:中國勢必強硬反擊
書法展融合時事 關鍵字「髮夾彎」、「94狂」入題
誰說沒工作會餓死?他45歲事業顛峰退休還嫌太晚,道出10年經營最幸福人生秘訣
涉偷民進黨中央9萬元 韓籍賊裁定羈押