阿將伊崮喜瀾觀點:當皮衣黃大叔遇上AI影片生成─驚喜還是驚嚇?
2024年6月2日,輝達(NVIDIA)執行長黃仁勳在台大體育館發表主題演講,(美聯社)
顛覆傳統觀念:算力絕非唯一的王道
站在人工智慧(AI)影片生成領域,系統的運算能力和速度固然重要,但更為關鍵的是影片素材的品質和相關性。這一個觀點挑戰了當前業界過度強調AI算力(computing power)的趨勢(詹益仁,2024),為我們理解和發展AI影片生成技術提供新視角。長期以來,業界普遍認為AI影片生成的成敗主要取決於系統的運算能力和速度,即所謂的「算力至上」論。然而,這種觀點忽略了影片素材品質和相關性的重要作用,導致許多AI影片生成專案的結果並不盡如人意。因此,我們有必要重新審視這一問題,深入探討影片素材在AI影片生成中的關鍵作用,以期找到更加全面、更加有效的解決方案。
影片素材:AI影片生成的「戰袍」與「靈丹」
從程式語言的角度來看,影片素材的品質,例如,畫面清晰度、色彩飽和度、構圖等,直接影響了最終生成影片的視覺效果。這意味即使我們擁有再強大的AI算力,如果輸入的素材品質低劣,生成的影片品質也不會太高。因此,在建設AI影片生成系統時,我們需要投入大量資源來建立高品質、多元化的影片資料庫。這些包括需要收集和處理大量的高畫質影片,並對其進行仔細的篩選與分類(Kumar等,2023),以確保資料庫有足夠優質的原始資料可以使用。然而,建立一個高品質的影片資料庫並不容易,它需要我們在硬體設備、資料儲存、人力資源等方面進行大量投入。除了確保影片畫質達到一定標準,我們需要建立龐大的資料儲存系統,以支援海量影片資料的存儲和管理(Zhu等,2023);我們還需要招募專業的影片編輯和資料標記人員,以確保影片資料的品質和準確性(Yuan等,2024)。只有建立一個高品質、多元化的影片資料庫,我們的AI影片生成系統才能擁有堅實的基礎,才能生成出令人滿意的結果。
(相關報導:
風評:沈伯洋式監控,極右派的崛起?
|
更多文章
)
相關性:AI也需要做「察言觀色」的戀愛高手!
從程式設計的視角來看,影片素材的相關性,即檢索到的影片片段與使用者輸入的主題、關鍵字等的匹配程度,也是決定生成影片品質的關鍵因素。如果AI無法準確理解使用者需求,並檢索到相關的影片素材,那麼無論生成影片的速度有多快,也無法滿足使用者的期待(Generation與Lindholm,2023)。因此,AI需要具備強大的自然語言處理和圖像識別能力,以便深入理解使用者的意圖,並在海量的影片資料庫中快速找到最相關的素材。這對我們的程式設計提出更高的要求,需要我們在演算法和資料結構方面進行更多的優化。具體來說,我們需要開發先進的自然語言處理模型,例如,基於深度學習的語義理解模型、情感分析模型等,以準確理解使用者的查詢意圖和情感傾向(Gupta與Agrawal,2022);我們還需要開發高效的圖像識別和檢索演算法,例如,基於卷積神經網路(CNN)的圖像特徵提取、基於哈希(hash function)的快速檢索等(Li等,2022)。只有同時具備強大的自然語言處理能力和圖像識別能力,AI影片生成系統才能真正理解使用者需求。
創造力:AI影片生成的「文藝模範生」
從創作的角度來看,系統還需要具備一定的創造力和審美能力,並根據使用者的需求和影片素材的特點,生成具有藝術感和觀賞價值的影片(Ye等,2023)。這意味AI影片生成不只是簡單的素材拼接,而是一個智慧創作過程。我們的程式不僅要能理解影片內容,還要能把握影片的風格、節奏、情感等藝術元素,並根據一定的美學原則,進行創造性的組合和編排。這需要在開發AI影片生成系統時,引入更多的藝術理論和美學原則,讓程式學會如何創造出打動人心的作品(Zylinska,2020)。例如,我們可以將電影編劇理論、導演構圖技法、色彩心理學等藝術理論和原則納入模型訓練。讓AI學習如何從講述一個吸引人的故事開始,如何營造美麗的畫面,如何透過色彩傳遞情感。我們還可以引入音樂理論、節奏學等知識,讓AI學習如何透過背景音樂和節奏安排來烘托主題,渲染氣氛(Henriques,2020)。總之,我們需要全方位地提升AI的藝術修養,讓它成為一個真正富有創造力和審美能力的「影片藝術家」,而不僅僅是一個簡單的「影片拼湊機」。
科技實現:「登堂入室」還是「班門弄斧」?
系統通常會將影片資料庫中的每一個影片片段表示為一個高維向量,捕捉其顏色、紋理、物體、場景、動作等特徵。當使用者輸入一個查詢時,系統會將查詢轉化為向量,然後使用向量檢索算法在影片向量資料庫中找到最相似的影片片段。這個過程可以使用如Faiss、Annoy等高效的向量檢索庫加速(Chaidaroon,2020)。找到相關影片片段後,系統會使用循環神經網路(RNN)、長短期記憶網路(LSTM)、變分自編碼器(VAE)等模型(Park等,2021)。,對選中的影片片段進行智慧組合和編排,考慮影片片段之間的語義連貫、視覺銜接與節奏韻律等因素,生成流暢、有意義與藝術感的影片。在這段過程中,生成對抗網路(GAN)等模型尚需對生成影片進行品質評估和優化,以確保視覺品質和語義能夠準確達標(Bandi等,2023;Kumar與Singh,2023)。
值得一提的是,向量科技不僅使得影片檢索和組合更加高效,也為AI影片生成賦予更多的創意。透過在高維向量空間中進行插值(interpolation)、外推(extrapolation)與融合(fusion)等操作,AI系統能夠生成全新的、前所未見的創意與超現實的視覺體驗(Po等,2023;Ye等,2024)。例如,AI可以在兩個不同風格的影片向量之間進行「插值」,生成一個漸變風格的影片;也可以在一個影片向量的基礎上進行「外推」,生成一個延續原有風格但具有新元素的影片。向量科技為AI影片生成開啟無限創意,使其能夠超越簡單的模仿和拼接,而進行真正的創造和想像(Buckner,2024)。
應用前景:AI影片生成的「天高任鳥飛、海闊憑魚躍」
AI影片生成技術有著廣泛的應用前景,例如,自動摘要影片、風格影片推薦、互動式影片敘事等。自動影片摘要可以幫助使用者快速瀏覽和理解長影片的主要內容;個性化影片推薦可以根據使用者的觀影歷史和偏好,推薦最相關、最感興趣的影片內容;互動式影片敘事可以根據使用者的選擇,即時生成不同的影片情節和結局,創造新的互動體驗(Dowling,2024)。除了這些應用場景,AI影片生成技術還可以應用於教育、廣告、遊戲等諸多領域。例如,在教育領域,AI可以根據教學內容和學生特點,自動生成適性化的教學影片,提高教學效果;在廣告領域,AI可以根據產品特點和目標受眾,自動生成吸引人的廣告影片,提高轉化率;在遊戲領域中,AI可以根據玩家的選擇和互動,即時生成個性化的遊戲影片(Dworak等,2020)。
算力與智慧:AI影片生成的「相愛相殺」
總體來說,站在AI影片生成立場,我們不應該將運算能力和速度視為唯一或最重要的因素,應該更加重視影片素材的品質和相關性。身為一位程式設計師或AI研究者,我們需要在系統設計和開發過程中投入更多資源在影片資料庫、自然語言處理、圖像識別、優化演算法等方面。同時,我們還需要加強AI在創造力和審美方面的訓練,引入更多的藝術概念和美學原則,讓我們的程式學會如何創造出打動人心的影片作品。只有在算力和智慧兩方面取得平衡發展,AI影片生成科技才能真正走向成熟,為我們帶來更多驚喜和可能性。
(相關報導:
風評:沈伯洋式監控,極右派的崛起?
|
更多文章
)
更多新聞請搜尋🔍風傳媒
因為你,我們得以前進,你的支持是我們的動力
更多文章
藍委誰最可能被罷免?黃暐瀚3原因點名葉元之:應避免再上綠媒節目立法院於5月28日三讀通過國會改革法案,引發許多綠營支持者不滿,罷免藍委的聲浪也隨之高漲。對此,資深媒體人黃暐瀚指出,在眾多可能被罷免的名單中,國民黨立委葉元之是最危險的,因他當選時的得票率不高,也非藍營主要戰將,擁護度較低,且民進黨會為了成為國會最大黨,全黨動員力求罷免藍委。
風評:海基會華麗轉身,冷衙門也能暖開機總統賴清德520就職之後,兩岸關係已幾經波折,圍台軍演、ECFA的134項台灣產品遭中止關稅減讓、在陸台灣藝人「我是中國人」表態浪潮,以及近日陸籍男子駕船直闖淡水河,如入無人之境,逼近台北市「心臟地帶」。以上種種,都是兩岸官方關係雪上加霜的體現。如同兩岸專家邱坤玄所言,今(2024)年4月的馬習二會,頂多只讓兩岸「微暖」而已。
鄭春鴻觀點:給黃仁勳的第二封信─誰需要帶著貓上班的員工?輝達要在台灣設立研發中心和設計中心,把台灣當成這個舉世矚目的企業的總部。您說在未來5年內,要招募1000名工程師。這樣的夢想工廠除了工程師之外,需不需要有一些會「作夢」的文藝青年參與其中呢?夢想一斤值得少?這些夢想的文藝青年可以為IT產業貢獻什麼事呢?
李志堯觀點:國軍取消刺槍術的做法,合理嗎?國防部長顧立雄於6月6日上午,首次列席立法院外交及國防委員會答詢時拋出一大串「新政」,諸如取消軍中刺槍術、不再踢正步、休假互助組不用回報等,在國軍基層的印象分數及好感度大幅飛漲,不管是對內領導官兵或對外面對國會立委和社會輿論,皆展現出亮眼的起手式。
楊渡觀點:別毀了臺語文的優雅疫情期間,世局蕪亂,時或惶然,孤寂讀思,偶然讀到鹿港才子許夢青詩《螢》甚為有感。「多少照書螢,蕭齋結舊盟,不愁風雨亂,心地自光明。」試著用臺語唸,聲音輕柔晶瑩,句句清澈,真是好聽極了。
夏珍專欄:民進黨不仁,以政務官芻狗新政府到位三星期,除了立法院吵得緊打得兇,朝野立委對新閣閣員堪稱禮貌,新閣官員初就任,除了少數不長眼的「黨官」,還在臉書嗆人「站著說話不腰疼」,官員備詢普遍比前任情緒穩定態度中肯,遺憾的是,在野立委沒給新閣閣員難堪,倒是民進黨的兩塊神主牌,讓閣員坐立難安。
觀點投書:于北辰們沒在怕大陸國台辦5月15日宣布將懲戒5位台灣名嘴及其家屬,其中包括退役少將于北辰。對於大陸此舉,于北辰表示,他從軍開始到現在,反共立場、爭取自由、保護台灣民主的立場從來沒有改變過,他覺得這是人生中最榮耀的獎章。
觀點投書:國軍女性比例高於英法加,已達美軍近十年平均值據近日國防部所供數據顯示,現行國軍女性人數占比為16.9%相較三年前15.6%高了1.3%,此數據高於英國的11.53%法國的15%與加拿大的16.06%,直逼美軍最新統計比例17.1%(2022年數據),按美軍最新DemographicsProfileoftheMilitaryCommunity中對於現役女性人數占比統計:「2010年為14.1%,2015年為15.1%,2020年為16.9%」國軍在這方面可說是緊追著美軍的腳步。
趙心屏專文:王采元–以喜歡的方式,做自己喜歡的事朋友建議我訪問室內設計師王采元,我上了她的工作室官網,感覺好像挖到寶藏。除了室內設計作品和設計家具,她的「采元跟你聊幾句」幾乎每週更新,一篇篇文章滿足了喜歡閱讀的我對於設計師的好奇,更讓我驚訝她如此頻繁寫作。她受父親–建築學者王鎮華的影響甚深,我進一步到她為父親的「德簡書院」建立的網站,那是一個深遂的知識庫,保留父親生前身影與思想的用心至深。
王建煊觀點:我現在很有錢耶!賈伯斯在病床上曾留有名言:世人所羨慕的好名聲及財富我都有了,但這些現在對我都毫無意義。我也說:人生自古誰無死,留取愛心照人間!
核三除役如何確保供電?張啟楷要求郭智輝提解方:燃煤是罔顧國人健康輝達共同創辦人暨執行長黃仁勳日前表示,若要在台擴大AI發展,電力限度是一大挑戰。對此,民眾黨立委張啟楷12日在立法院經濟委員會質詢經濟部長郭智輝時表示,核三廠將於今(2024)年及明(2025)年陸續除役,屆時要如何確保供電穩定,並消除產業界疑慮?張啟楷強調,電力不是政治與意識型態,政府除了解決缺電困境,也應顧及國人健康。
賴清德稱馬英九也說過兩國互不隸屬 馬辦反擊:別用文字遊戲欺騙外國人總統賴清德日前接受時代雜誌專訪時表示,520就職演說中提及「中華民國和中華人民共和國互不隸屬」論述,是根據事實陳述,2位前總統馬英九、蔡英文都曾提過互不隸屬的立場。對此,馬英九基金會執行長蕭旭岑指出,「兩國互不隸屬」和「兩岸互不隸屬」絕對是不同概念,賴清德如果有本事就直接宣布台獨,不要用文字遊戲欺騙不了解中文的外國人,假裝自己真的想要致力於和平一樣。
獨家》金管會檢查局長8月將提前退休 挑動彭金隆敏感神經消息人士透露,表現優異、升官快速、金管會前主委黃天牧時代被拔擢為金管會檢查局局長的張子浩,即將在今年8月提前退休。這項於黃天牧卸任主委前簽准的人事,有台中商銀案的謎團,也有外界對於金管會新任主委彭金隆如何拿捏金融檢查尺度的關注。
新青安是炒房幫兇?財政部晚間回應了近期房市熱鬧滾滾,外界認為新青安政策淪為這一波炒房幫兇。財政部今(13)日晚間強調,購置預售屋並非青安貸款適用對象,兩者不應混為一談,而且影響房價因素眾多,實在不應直指青安貸款為投機客炒房的幫兇。
藍委提警消退休金比照國軍 綠委反對白營觀望 銓敘部憂財務缺口擴大警消待遇近來屢受討論,立法院司法法制、內政委員會今(13)日舉行聯席會議,審查多名藍委擬具的《警察人員人事條例》條文修正案,主張將警消退休所得替代率比照國軍,場內國民黨團祭出甲級動員,院外則有數個退警團體頒布「緊急陳情動員通報」聚集。歷經近5小時的詢答後,藍綠雖在逐條審查時再度上演表決大戰,藍委甚至一度因在場立委人數不足險讓綠委通過散會,但最終總計11條條文仍順利出委員會,關鍵條文第35條則保留交付黨團協商。
2024 MG4國產電動車超殺售價99.9萬起!雙馬達四驅435匹馬力打造超高性價比?英國老牌車廠MG今年正好適逢品牌100週年,然而,在被上海汽車集團收購後,許多人會認為當今「名爵」早和以往打造眾多經典小跑車的MorrisGarages毫無相關,但不可否定的是MG持續朝向歐洲市場販售全新車款,並於歐洲市場創下了相當不錯的銷售佳績,這也足已讓人拾起信心看待這上汽精心經營的百年英國品牌了。這回台灣英倫摩里斯導入了2023年歐洲市場電動車銷售第四名的MG4,並同樣以超高性價比的策略,搶攻國產電動車市場。
藍綠大戰警消年改 黃捷批不敢記名投票 藍幕僚反擊「連慣例都不知道」立法院司法及法制、內政委員會今(13)日聯席審查國民黨立委蘇清泉等27人所提「警察人員人事條例第35條條文及增訂附表三」草案,希望提高警消每月退休所得的所得替代率。但民進黨立委黃捷在臉書發文批評,國民黨又用同樣的招數,「打包未經討論的爭議法案送特快車、再斷章取義說民進黨不討論,一樣不敢記名投票。」但國民黨青年部前主任、羅智強辦公室主任陳冠安也在臉書發文回批,連在委員會慣例是舉手表決都不知道,黃捷是不是太少來立院上班。
金祐國際研發可背式智慧疫苗冰箱 首批捐贈六龜造福偏鄉民眾高雄市政府經濟發展局轄下新創基地「高雄KO-IN智高點」中駐點新創「金祐國際」,成功研發出「可背式智慧疫苗冷鏈系統(智慧疫苗冰箱)」。為了改善偏鄉醫療,特別捐贈3組設備給位於六龜區的大嘉診所。今(13)日特別舉行捐贈儀式,共同展現出高雄新創的研發量能以及回饋社會公益的心意。
台南芒果外銷新加坡首櫃封裝 黃偉哲期許外銷業績長紅芒果季節已來臨,台南市高品質芒果近日將銷往新加坡唐吉訶德(約15家分店)及新加坡網購通路販售,總共700多箱約4公噸的台南愛文芒果,於今(13)日封裝進櫃,市長黃偉哲特別親臨現場視察芒果外銷新加坡的準備過程,同時感謝農民及農產運銷單位的支持,讓台南芒果的外銷業績長紅。
全國科展7/22臺南登場 黃偉哲邀親子來看科展、逛博物館第64屆全國中小學科學展覽會將於113年7月22至28日在大臺南會展中心盛大舉行,臺南市長黃偉哲今(13)日偕副市長葉澤山及教育局長鄭新輝,與國立臺灣科學教育館館長劉火欽共同出席展前記者會。黃偉哲歡迎全國各地的民眾一起來臺南看科展,支持臺灣科學教育的成果與未來。
揭是方電訊曾為蔡英文、賴清德分析輿情 徐巧芯促回應是否濫用個資國民黨立委徐巧芯踢爆,民進黨政策會執行長王義川分析群眾資料的來源可能為中華電信子公司「是方電訊」,是方電訊則表示,他們提供的網路輿情分析服務未涉任何個資與隱私。對此,徐巧芯表示,是方除了在2020年為前總統蔡英文做輿情分析,2018年也曾得到台南市的輿情分析標案,手握許多公部門與私部門的個資,應正面回應民眾這些資訊是否已被濫用,並解釋與民進黨的關係。
高雄五甲、聯興2座特色公園 榮獲2024建築園冶獎肯定素有「建築界奧斯卡」、「台灣普立茲克獎」美譽的建築園冶獎今年邁入第30年,是建築美學與推展城市行銷的重要指標。本屆建築園冶獎得獎名單陸續公布,工務局公園處今年再獲高度青睞,「三民區第99期重劃區公園及綠地開闢工程」與「鳳山區五甲公園遊戲場統包工程」等兩案經專業評審委員現場審查後,榮獲2024建築園冶獎「公園綠地景觀類」獎項肯定。
竹縣府持續監控頭前溪水域 嚴格把關民眾飲用水水質新竹縣受垃圾處理量能不足影響,部份垃圾須暫置等待運出處理,其中竹東掩埋場於3月暫置垃圾達到10,862公噸,新竹縣政府環保局指出,經中央協助調度處理量,及外縣市代處理量逐漸恢復,環保局積極執行暫置垃圾轉運作業,目前竹東暫置垃圾已低於7,000公噸。此外,環保局也持續監測頭前溪,嚴格把關新竹縣民的飲用水水質。
加速新竹棒球場明年重啟改善 竹市府籲統包商勿再拖延新竹市議員蕭志潔、劉崇顯、陳建名等今(13)日在市議會總質詢關注新竹棒球場改善重啟相關議題,市長高虹安答詢表示,市府全力推動棒球場改善重啟,目前棒球場覆土移除工程、棒球場重啟設計規劃案皆已順利決標並刻正進行,不過過程中持續遭到統包商拖延,包含自去年8月起屢次要求統包商進行第三方鑑定及移除過載覆土,統包商遲不願執行,當市府準備自行進場移除覆土之際,統包商卻在今年3月突向法院聲請證據保全程序,導致市府無法進場施作覆土移除。高虹安強調,若無廠商持續拖延等外部不利因素,預計於明年4月完成改善工程竣工並進入驗收程序。
虛擬通貨商業同業公會成立!常監彭云嫻:確保產業的合規與安全中華民國虛擬通貨商業同業公會(下稱虛擬通貨公會)今(13)日正式宣佈成立,標誌著臺灣虛擬通貨行業邁向新的發展里程碑。公會於今日召開第一屆第一次會員大會(成立大會)暨第一屆第一次理監事聯席會議,並選出了首屆理監事名單。其中,由HOYABIT創辦人暨執行長彭云嫻擔任首屆常務監事。作為公會的重要角色,常務監事將承擔日常管理監督的重責,確保公會營運合規且符合最高標準。
AI專家炙手可熱!科技巨頭激烈爭奪人才,年薪上看數千萬台幣美國人工智慧研究實驗室OpenAI前年推出聊天機器人ChatGPT後,掀起全球討論熱潮,廣受關注,更被視為是人工智慧的重大突破。英國期刊《經濟學人》指出,ChatGPT推出後,人工智慧勞動市場已經發生了轉變,英國市場情報公司ZekiResearch估計,西方約2萬家公司正在招募人工智慧專家,而隨著人工智慧人才流失,大型科技公司競相填補人力缺口。
臺南國際芒果節來襲!臺南芒果新鮮直送 體驗芒果美食與創意活動芒果節自6月22、23日起,至7月13日周周有活動,6月23日就是南化芒果節,6月29日走馬瀨農場還有好芒牧草節以及臺南400地景劇場朱宗慶打擊樂團2親子表演聯合舉辦,後續玉井、大內、楠西、官田、左鎮產區週週有活動,臺南好精采。歡迎參加臺南芒果節,更多活動資訊請見臺南國際芒果節FB粉絲專頁(www.facebook.com/mangotainan/)。
朝野為警消年改交鋒!綠委擁人數優勢提散會 召委吳宗憲急call藍委護駕國會改革引爆的朝野衝突延燒之際,藍綠今(13)日再為年金改革交鋒,立法院司法法制及內政委員會今日聯席審查《警察人員人事條例》部分條文修正案,但雙方對關鍵條文毫無共識,藍委有意保留交付協商,綠委則要求精算報告提出後再擇期處理。然而,國民黨團雖本具人數優勢,但因民眾黨2名立委及自家2名藍委均未到場,使得綠委擁有席次優勢,而在綠委正式遞出散會動議前,會議主席國民黨籍召委吳宗憲旋即宣布休息,緊急聯絡2名藍委。
央行為何升「準」不升「息」?外界質疑3大不良副作用,楊金龍一次說清楚中央銀行今(13)日宣布升準1碼(0.25個百分點),並且加碼第6波房市管制措施,升「準」不升「息」的決議引發外界關注。央行總裁楊金龍說明,升準主要是「量」的緊縮,同時也有「價」的作用,不僅直接影響銀行貸放資金規模,估計可以收回1200億元,政策宣示效果明確,也能帶動貨幣市場利率上升、抑制通膨預期。
新北學子94強! 大學申請放榜錄取4,723人 在地就學展現卓越成果!113學年度的大學申請入學今(13)日放榜,新北巿公私立高中職今年報名人數總計8,548人,錄取4,723人,其中有945人錄取國立大學,錄取臺灣大學計55人、清華大學44人、陽明交通大學31人、政治大學46人、成功大學31人、師範大學55人、中央大學39人、中興大學43人、中正大學20人,以及中山大學22人,新北學子表現亮眼。
三泰路排水改善工程完工 水利局與輔大公私協力 健全排水系統!輔仁大學中美堂周邊因區域地勢較低漥,排水無法順利排至校外側溝,常因突如其來的瞬間大雨即積水成湖,故輔大校方於去年11月完成改善工程,將落在校內的雨水往三泰路人行道側溝排放,而為因應校內大量排水,水利局也於今(113)年3月完成三泰路排水改善工程,大雨來時不必擔心因校內排水而淹水。
數位轉型巡迴列車正式啟動 7/4板橋首場結合碳健檢 助企業永續!輔導轉型出新招!為協助產業導入數位科技,發展創新商業模式,經發局今(113)年首次推出「數位轉型巡迴列車」,分別前往新北六大產業區域舉辦雙軸轉型推廣說明會,不僅針對數位轉型提供多樣化軟硬體解決方案,更結合碳健檢行動診所計畫,全方位協助企業提升管理效率,邁向永續經營。首場說明會將於7月4日在板橋隆重登場,歡迎企業踴躍報名,把握數位轉型新契機。