AIEC評測中心發布語言模型評測結果

2025-10-03 15:21
AIEC評測中心發布語言模型基準評測結果,資安院龔化中副院長(右)、工研院王邦傑組長(左)。(圖/AIEC評測中心提供)
AIEC評測中心發布語言模型基準評測結果,資安院龔化中副院長(右)、工研院王邦傑組長(左)。(圖/AIEC評測中心提供)

推動AI在地化評測與第三方驗證 強化產業AI信任發展

AI產品與系統評測中心(Artificial Intelligence Evaluation Center,簡稱AIEC)於10月3日首次公布語言模型基準評測結果,期望推動台灣AI在地化評測與第三方驗證,進一步強化產業AI的信任基礎。

本次評測依語言模型規模進行系統性檢測,檢視國內外模型的整體表現。除了採用「高中學測國文科」與「高中學測社會科」作為標準指標外,AIEC更納入「台灣價值觀」評測,呼應國際AI主權發展趨勢,並作為未來建構在地模型或調校國際模型的重要基準。

在42項受測模型中,國內開發的 TAIDE(Gemma-3-TAIDE-12b) 在小模型(13b以下)組別中表現名列前茅,甚至優於其基礎模型 Google Gemma-3-12b-it,展現台灣AI研發能量。在大模型(13b以上)方面,OpenAI GPT-5 的整體表現最佳;而 Google Gemini 2.5 Flash 在「台灣價值觀」項目中表現突出,顯示其對台灣主流價值觀具備高度理解與對應能力。另有部分中國模型在「台灣價值觀」測驗中也有不錯表現,研判可能是因為其蒸餾技術取用歐美模型輸出作為訓練資料。

整體而言,若歐美語言模型未使用台灣繁體中文語料進行訓練,在「台灣價值觀」的評測上相對較弱,突顯出本土化語料建置的重要性。數位發展部目前正積極推動台灣主權AI語料庫,提供具在地語境與本土價值的繁體中文資料,成為語言模型訓練的重要基礎,確保AI發展能夠符合台灣社會價值與語言文化。 (相關報導: AI語言模型專家王冠程30年推雙語教學 AI英文作文檢定系統獲金鼎獎入圍肯定 更多文章

AIEC也將廣徵各界專家提供評測題目,經審查後可納入未來評測題庫。未來AIEC將針對不同產品、系統與應用領域,持續推動國內自研AI評測工具,並積極對接國際評測方法、規範與標準,強化台灣AI產品的市場適用性與全球化發展,朝向安全、穩健、可信賴的AI評測體系邁進。

因為你,我們得以前進,你的支持是我們的動力
今日精選
更多文章
別只記得帶衣服!旅遊專家曝必帶1實用小物,隨時能派上用場
「苗栗隨機殺人犯」出獄半年再砍人 網灌爆廢死聯盟臉書要求表態
年滿60歲,勞保該選一次領還是月領?專家曝揭最佳請領方式!能多領284萬
首爾不會考慮發展核武!南韓總理金民錫:我們期望台海和平穩定
買房別只看價格!專家揭3大NG格局:等於把錢丟水裡,小心後悔一輩子!
主打簡約純樸+利他美學 太禾建設「太禾良品」無印風別墅亮相
苗栗男二度隨機砍人!10年前曾辯「心情不好想砍人」 當地里長今嘆:這種人可教化?
AI辨識全時守護 高雄環保局即時掌握空污
最可怕的經濟惡魔「停滯性通膨」潛伏?芝加哥聯儲總裁提警告
高學歷不吃香了?數據揭密:學位正在光速貶值!企業大裁員,「1技能」遠比大學學位更重要
承認罷免前身兼綠議員助理 「葉元之貴人」發聲:從沒說過我是公民團體
花政府錢「改變民眾對太陽能的觀感」?川普整治「最大騙局」沒收75.6億美元綠能支出
威廉王子:登基後「我將改變英王室」,希望哈利別與自己一樣走同樣錯路
豪華品牌殺入性能電動車!Genesis GV60 Magma 全球測試完成,641匹馬力媲美 Hyundai Ioniq 5 N 即將亮相
家人過世同時留下遺產債務,他拋棄繼承發現慘了!專家曝忽略1件事,白白少拿大筆財產
機車族小心!警察專抓1類違規,一晚攔下14輛,最慘連收2罰單罰5400元
大批鏟子超人病倒!羅一鈞曝警訊「防橫紋肌溶解」 3字口訣避免熱傷害
失業離職還是能保勞保!專家教3招延續年資,退休後每月有錢安穩入袋
普發現金1萬有變數?到底何時能領,卓榮泰曝最新進度
名人講堂人氣爆棚 金鐘獎演員馬力歐點燃青年小宇宙
大溪、旗山輸了!台灣最強老街吸1468萬人,遊客讚美食多又不貴、值得一去再去
彰縣府辦「愛在鹿徑—鹿港尋愛一日遊」 王惠美加碼證婚送好禮
國慶晚會中市交通局籲轉乘捷運到文心森林公園站 省時又便利
歡慶雙十中市府三大亮點邀民同慶 超實用紀念小物限量發送
美國政府關閉怎麼影響市場?華爾街投資專家說清楚講明白
台中大甲商圈商機多周邊日式宿舍群招商說明會亮相 多家跨界產業表意願
中市環保局結合有力團隊馳援花蓮 公私協力助災區環境復原
勞工補貼來了,最多領7.2萬!上課有錢拿「時薪190」 投保級距試算一文看懂
麥斯威爾咖啡改名 原因竟和美國房地產走向有關
直送亞洲最前線的搖滾能量 「2025搖滾台中」10/11-12登場
宏國德霖科大洪以萱勇奪亞洲冠軍 台灣首度晉級世界青年廚師總決賽
珍古德辭世!蘇俊賓手繪畫像追憶,教女孩探索世界、教我們擁抱眼淚的科學家
中秋雙十連假151萬、電子A卡上路、籲提早報到防違規受罰
平價家具、電動沙發一次選購 晶華傢俱周年慶品牌轉型引爆買氣
老闆們注意!勞動部最高350萬「員工訓練補助」開放申請,別讓你的權益睡著了
商研院帶路!解鎖東京5大運動科技巨頭,還能跟金牌教練跑一段,名額有限
經濟熱議》美國學貸危機會拖垮經濟?有人55歲都還不完,債務反倒增加三倍
中國版H-1B上路!「K簽」有意築巢引鳳,為何挑起民怨沸騰?
日月光楠梓新廠動土!176億元投資先進封裝 引領「先進×永續」雙軸轉型
台北「演唱會經濟」上半年灌41億產值,飯店住房率衝破9成,下半年還有大型活動加持
Toyota GR86雙生車換夥伴?傳將攜手Mazda MX-5打造下一代雙生跑車,Subaru BRZ恐成絕響!
國軍清出災民私房錢怎辦?陳柏惟原話曝光挨轟「污辱官兵」 顧立雄說話了
洗花椰菜不要再泡鹽巴 、小蘇打粉!專家教1招徹底清潔,菜蟲農藥全都自動浮出來
企業主、自住客都在關注!副都心這棟地標為何備受矚目?
科技熱議》DeepSeek推新模型砍半價,中美AI競爭再掀風暴?
車禍無外傷以為沒事!5旬男拖兩天才就醫 「脾臟破裂、肋骨斷4根」險喪命
英曼徹斯特恐攻釀2死,兇手是敘利亞裔男子!《衛報》:近代最致命反猶襲擊,英國將走向分裂還是包容?
陳其邁成2028最強黑馬?沈政男曝他5優勢「海放政壇大咖」:比賴清德難打
房利美、房地美紐約辦事處將永久關閉 原因竟是「川黑」州總檢察長涉嫌不法
挑戰法拉利稱霸的終極武器,Toyota GR010 Hybrid 將於 2026 年強勢回歸!