在數發部數產署支持下,工研院於10月29日宣布成立台灣首座「AI測試實驗室」。未來國內應用語言模型進行AI相關開發的公司,都能帶上自家模型,到實驗室進行評估與檢測。
工研院表示,AI測試實驗室的主要目標是協助國內廠商評估及改進語言模型,以確保語言模型、AI應用能在各種不同場景中保持穩定和可靠性,同時滿足企業和使用者需求。
具體而言,AI測試實驗室有哪些重要任務?
任務1:解除資安疑慮
生成式AI應用範圍日益拓展,作為AI理解文本、生成內容、語音辨識、情感分析等重要依據的語言模型,卻容易因為數據偏差或失真,導致產生錯誤或不當資訊,在處理敏感數據時亦存在資安風險。
因此,工研院參考國際可信賴AI的相關框架及標準,透過AI產品與系統評測中心(Artificial Intelligence Evaluation Center,AIEC)專家以及技術委員會,建設可信任語言模型評測工具,提供包括準確性、公平性、可靠性、隱私及資安等自動化語言模型測試方案。
工研院表示,台灣過去欠缺對AI模型進行可信任測試的第三方認證組織,開發者只能自行運用國外大型雲端公司的模型測試,除了檢測項目不夠彈性切合需求之外,也害怕有資安疑慮。
任務2:測試是否符合繁中語境
AI測試實驗室除了有專業人員協助人工檢測項目,廠商亦可以將模型放入機器、利用系統性的題庫進行自動化審查,以測試模型準確率。工研院也補充,實驗室還有一項重要功能,便是為客戶確認新開發的模型是否符合繁體中文語境。
任務3:協助企業取得國際檢測報告、證書
工研院量測技術發展中心執行長藍玉屏表示,透過參考國際以及國內專家審議的測試題庫,將促進企業在應用AI技術時更具信心。未來,企業在語言模型通過AI測試實驗室的檢測後,也能夠獲發檢測報告與證書。
此外,為了強化國際合作,工研院也同時與法國國家計量院(LNE)簽署合作協議,針對AI進行國際合作與技術交流,助力台灣AI評測技術接軌國際。
工研院向《數位時代》表示, 目前AI測試實驗室處於試營運階段,為了鼓勵台灣企業使用,暫時不需收費,預計明年起研擬收費機制。 而已經預約檢測服務的廠商則有5、6家,包含應用範圍廣泛的智能客服機器人。
未來,工研院也希望將測試服務往醫療、金融和教育等AI智慧領域擴展。
延伸閱讀:【圖解】一卡通支援日本PayPay了!4個步驟大賺最高50%回饋,怎麼切換使用?
責任編輯:李先泰
延伸閱讀
企業資料上雲安全嗎?Google Cloud揭駭客手法:騎劫挖礦、中間人攻擊⋯是什麼意思?
【觀點】「聊天機器人」成本高,真的有幫助?優勢、應用一次看懂
「加入《數位時代》LINE好友,科技新聞不漏接」