《琴響‧新世界》編織音畫饗宴 文化部秀高齡科技成果

記者黃朝琴／臺北報導

NSO國家交響樂團《琴響‧新世界》音樂會今（19日）晚上於臺北國家音樂廳登場，此乃文化部114年「高齡科技計畫成果」成果發表，透過數位技術編織音樂畫卷，將300位樂齡長輩親手繪製圖樣，以AI科技預先轉化動畫元素，樂團現場演奏的音訊，則透過AI即時判定功能，根據樂器、音量、旋律等不同，即時轉化為動態影像，樂音與影像相互呼應，當交響樂遇上AI，打造一場動人的音畫饗宴。

文化部今日舉辦《琴響‧新世界》成果發表音樂會記者會，分享114年「高齡科技產業行動計畫」，也邀請來賓現場繪圖，透過即時互動串流技術，並結合音樂演奏，以AI科技打造可以「看見」的交響曲。

文化部綜規司長魏秋宜表示，臺灣2025年正式進入超高齡社會，每5個人有1個人超過65歲，文化部配合行政院從113年起推動「高齡科技產業行動計畫」，發展樂齡社交數位化活動，讓AI技術從產業，走向公共服務，以音樂為主軸，結合AI與智慧投影技術，讓音樂賞析與科技應用相融合，並創造可複製案例模式，提供高齡者鑑賞新型態藝文展演活動體驗。

魏秋宜指出，今年8月委託NSO擇定臺北、雲林、臺中、高雄舉辦4場次《繪響新世界》分享會，在資策會數位轉型研究院、臺北市立聯合醫院神經內科與失智症中心協力下，邀請300位高齡長者與照護者，聆賞莫扎特第九號交響曲《新世界》，藉由導聆課程及室內樂現場演奏，讓長輩在古典樂浸染中，融入生命經驗進行創作，繪製記憶中難忘時刻的圖像，對於音樂與繪畫結合，長輩們都感到療癒。

影像設計師王奕盛表示，長輩創作圖像，透過掃描進入電腦，運用AI科技轉化動畫元素，樂團現場演出則透過麥克風收音，AI技術即時分析演奏音訊，判斷各種樂器的獨立頻譜訊號，在美學基礎下，設定樂音與影像配對組合，在舞台即時呈現動態影像。

資訊工業策進會數位轉型研究院長林玉凡表示，300位長輩繪製原創圖像導入模組化「繪圖即時互動串流技術」系統，技術整合Grab Cut、Threshold、Morphology等影像辨識演算法，可在無邊框、無QR code情境下，精準擷取圖像，讓每幅作品透過即時掃描，在10秒內轉換為動態影像，並與現場室內樂演出實時互動。

文化部表示，《琴響‧新世界》成果發表音樂會，由NSO與目前擔任奧勒岡交響樂團副指揮楊書涵攜手，呈現德沃札克E小調第九號交響曲《新世界》，融合前導分享會樂齡參與者創作內容進行後製整合，結合資策會技術與影像設計師王奕盛的設計，演出整合音訊分析（Audio Feature Extraction）、視覺生成映射（Generative Visual Mapping）及人機互動設計3大技術面向，讓樂音與影像透過 現代科技相互呼應，打造一場跨域、共感、多維的藝術饗宴。

文化部說明，計畫導入「AI聲波擷取與聲音視覺化技術」，以AI音訊分離模型（如Demucs）即時分析現場演奏聲音，從整體音訊中拆解8種亮點樂器的獨立頻譜訊號，包括小提琴、長笛、單簧管、小號、大提琴、法國號、低音提琴與定音鼓，由各樂器頻譜經過傅立葉轉換（FFT）與正規化處理，再藉WebSocket協定即時串流，驅動視覺引擎渲染出對應的動態視覺效果，搭配樂章中10個視覺亮點段落，將長者繪畫創作與音樂深度融合，共同創造視覺化的音樂畫卷，展現科技賦能的藝術文化新體驗。