AI手語氣象主播亮相 週一至五當晝講天時【涉己新聞】
客家電視當晝新聞,自2011年8月開始提供手語播報服務,至今已長達14年,隨著AI科技日新月異,今天(8日)將推出AI手語氣象主播「阿明牯」,這套由工研院跟公廣集團公視、客台、台語台,歷經一年半共同努力的成果,未來將在每週一至週五,當晝新聞跟鄉親見面,進一步提升,對客家鄉親與聾人朋友的公共服務。
「今天各地早晚稍涼。」
聽到語音,AI手語主播同步進行手語翻譯,公廣集團公視、客台、台語台跟工研院共同合作,從AI翻譯訓練、骨架偵測以及2D生成,歷時一年半的努力,8日AI手語氣象主播「阿明牯」,正式上線。
客家電視台台長 向盛言:「其實客家相對華語或是相對其它語言,我們某種程度就是之前的相對少數,為什麼客家電視台堅持每天中午,12點半的時候跟其他人不一樣,我們有兩個主播,兩個主播,一個打手語、一個是講客語,就是我們知道說,這些少數的人他可能有些需求,需要別人幫助,我們就要從他們的需求出發。」
集結新聞資料影像,讓AI學習,建立手語資料庫,並透過AI語音生成客語四縣腔,最後套上主播外型,生成過程完全仰賴AI科技,這套將文稿轉為立體手語的技術,臺灣才剛起步,為了提升手語準確度,工研院團隊投入大量心力,不斷調整並訓練AI,辨識正確手語位置。
工研院資訊與通訊研究所組長 王恩慈(資畫):「目前的話我們其實從那個,天氣資訊的這個部分先切入,然後所以字詞彙大概會有一千多,到將近兩千左右的部分,那目前的話其實重點是在於,我們在手語的手勢的這個地方的,骨架資訊的一個擷取,目前的話準確度已經做到98%以上了。」
手語翻譯員 王興嬙:「其實手語它是很視覺化的語言,我們會有很多根據前後文的關係,然後動作會一直在調整,但是因為它是一個語料庫,建置完之後,然後AI輸出,就把它再串在一起的一個語言呈現,所以在這方面還會有一點落差。」
手譯不只有手部動作而已,要完整傳達語意,還必須包含手型、位置、方向,動作、非手信號5大條件,而這套系統未來將持續精進,可望在遇到緊急天氣資訊,為聾人朋友提供更即時的服務,落實資訊平權。