科技

人工智能分拆音軌的時代

SPILL
更新於 2021年05月28日10:13 • 發布於 2021年05月29日03:43 • 余彤雪

筆者多年前和音樂業界友人閒談中,偶爾間說起關於樂手們聽歌曲時常會有將歌者的人聲,或不同樂器獨立聆聽的需要。一方面他們要清晰無誤地聆聽不同的人聲和樂器,分析每件不同樂器的編排、音調和節奏;另一方面,如果你是彈奏某樂器的樂手或者是樂器的學習者,你更加經常要用心細聽某樂器的內容,如音調、音色、拍子等。在沒有樂譜的情況下,多數也需要反覆聆聽無數次才可以。如果有獨立的對應音軌便會是一大的方便。

其實,在音樂製作的過程中,每一件樂器、人聲、和聲等,原本都是由很多獨立的音頻軌道去錄製、處理和混音,一般可上至幾十條的音軌。

廣告(請繼續閱讀本文)

而製成的歌曲多數都是混合成左右兩聲道的音訊。因為人是用左、右耳來聽聲音的。所以傳統上 CD、MP3 和不同的歌曲檔,最後都是混合成兩個聲道的。

當初筆者忽發奇想,如果唱片公司發行的歌曲檔可以原來獨立不同音軌的型式去發售,那便可以為想獨立聆聽不同樂器或人聲的人,例如樂器學習者、樂手、愛聽各種樂器聲編排的人,提供更直接方便的途徑去聽不同的獨立音軌。 不單如此,這樣可以令歌曲銷售更多元化。增加聽眾對不同歌曲內容的欣賞度和不同樂器聲音的認知度。當然這樣還要配合播放的器材和軟件的功能,甚至解碼能力才能好好實現。

早年音樂製作常會用 MIDI(Musical Instrument Digital Interface)檔,其實就是包含不同樂器的音軌,並可方便播放和處理的音頻應用檔,很多音樂人也有用到,可以對應樂譜作不同的改動,可惜如果沒有對應的 DAW(Digital Audio Workstation)、音頻處理軟件和一些較好質素的聲音庫,就不能準確地聽到優質而真實的樂器聲音。如非音樂工作者便難以簡化地以電腦或手機即播即聽了。

廣告(請繼續閱讀本文)

然而,這個念頭只是多年前的一個想法,多年後的今日,電腦硬件和軟件的發展神速,人工智能 AI(Artificial Intelligence)的應用得以廣泛使用,不少聲音運算法已經可以從一些複雜的聲音源分離出不同性質和類型的聲音,最常見的是人聲分離的應用,多年前有一種人聲消除的傳統方法,所謂的 vocal remover,給人作唱歌的用途,它是以一些簡單的相位加減和濾波的音頻處理方法,把原有歌曲中的人聲去除,然而效果很一般,往往不能把人聲完全去除。而且也影響歌曲的保真度。

到 90 年代有了 karaoke,因為人聲音軌和音樂音軌是獨立出來,用家便能方便地完全去除人聲,但也只限於人聲的開關。

廣告(請繼續閱讀本文)

音頻運算法分離人聲的技術近年也多數應用在消除噪音功能之上,例如通訊系統的通話功能上,主要分離出所需的語音,把非語音的雜音去除,用以增強人聲語音的保真度和準確度,又例如新型助聽器,把對話和人聲訊息分離出來,增強用家對人聲訊息的清晰度等。

人聲分離也很常用於擷取伴奏音樂的用途,把一般兩聲道的歌曲人聲分離出來,剩下的伴奏可作音樂編裝、伴唱、伴奏音樂 MMO(Music Minus One)的用途等。

有了 AI 運算法,我們將能更輕易從一個原本已經混音的立體聲道歌曲檔中分離出內裡不同成份的音軌,例如人聲、鼓聲、鋼琴、結他和其他不同樂器,甚至是非音樂成份的環境聲等。

這些強大的運算法都受惠於日催成熟的機器學習(machine learning)和大數據(big data),例如 wave–U–net 軟件,不同種類的聲音和音色可被其頻譜分析出來,不同樂器或人聲的特徵就如一堆大數據,再讓軟件不斷學習,並能更準確和有效地從混合了的聲頻中分離出不同類型的聲音出來。

所以,筆者多年前覺得很不可思義的事情,今日都能一一實現。 而這些技術更可衍生很多不同的應用,如歌曲學習、樂器同步訓練、新型助聽器、抗噪音功能、智能音箱、聲紋認證等,令音頻的產品功能更優質和更多元化。

近來也有不少線上即時運作的聲音分離軟件,如「Moises: AI Music Platform」可以很方便地讓用家體驗這些音頻分離技術的威力,用家只要把一般歌曲的mp3 檔上傳到網站,簡單幾個選項按鍵,不出一兩分鐘便會分離出所需的獨立音軌,大家不妨一試。

不同音軌的選擇包括:

1 條音軌(無鼓)
2 條音軌(無鼓、無低音結他)
1 條音軌(只有人聲、鼓、低音結他)
2 條音軌(人聲、伴奏)
4 條音軌(人聲、貝斯、鼓、其他)
5 條音軌(人聲、貝斯、鼓、鋼琴、其他)

音頻的科技應用隨著微處理器的速度增強,從而能讓速度要求更高的智能演算法和相關的機器學習軟件發揮更強及更多元化的功能,讓聲音的處理更有效和更方便快捷。大家一起期待人工智能為消費者帶來喜悅的時代吧。

按此了解更多影音資訊

請瀏覽 SPILL 網站及關注旗下社交平台: 

MeWe:@spill
Facebook:@spillhk
Instagram:@spillhk
YouTube:@spillhk

訂閱 SPILL Paper 電子通訊,為你送上電郵限定的精選新聞,以及不同欄目的深度報導,評測、觀點、專題,包羅萬有。

查看原始文章

更多 科技 相關文章

DeepSeek 資安漏洞 暴露用戶對話記錄與 API 金鑰
流動日報
Apple 全球裝置安裝量達 23.5 億台 持續創新高但增長放緩
流動日報
「Capcom Spotlight」與「魔物獵人 荒野 Showcase」 將於 2 月 5 日 早上 7 點直播!第二次公開 Beta 測試的最新消息同步公開
Saiga NAK
外媒:DeepSeek AI 新聞準確率僅 17% 其他競爭對手平均準確度為 38%
Unwire.hk
濵田酒造推出限量「銀河啤酒花」粉紅葡萄柚香氣本格燒酎「CHILL GREEN bitter & tropical」,2月18日正式發售!
Saiga NAK
iPhone 會否有外型設計上創新?Tim Cook 罕有回應
流動日報
Tim Cook 回應 DeepSeek 的影響
流動日報
【評測】ROG Astral RTX 5080 OC Edition 四風扇散熱巨無霸
Unwire.hk
微軟提供「提煉版」DeepSeek R1 首批支援 Snapdragon X 的 Copilot+ PC
Unwire.hk
日本任天堂網店禁用海外信用卡 杜絕不正當交易
Unwire.hk
NINTENDO 64 Nintendo Switch Online遊戲名單新增「恐龍獵人」「恐龍獵人2:邪惡之種」
Saiga NAK
DeepSeek 被意大利 App Store 及 Google Play 下架
流動日報
YouTube 出現 2 小時 52 分鐘無法被跳過的廣告
流動日報
【蘋果業績】iPhone 銷售意外下滑 AI 換機潮幻滅
流動日報
2023 年 OpenAI CEO 言論被記起 Sam:「初創不可能以 1000 萬美元同 OpenAI 競爭」
Unwire.hk
Tim Cook 回應 DeepSeek AI 發展 「創新促進效率,未來 AI 方向明確」
Unwire.hk
Mazda 公佈更新商標 平面設計配合現代需要
Unwire.hk
搞笑藝人Gorgeous接受新元素的體能挑戰!「Gorgeous的魔物獵人 荒野 嘗試當獵人!」將於1月30日起依序播出總共5集!
Saiga NAK
Sony 調整 PlayStation Plus 服務 未來將減少 PS4 遊戲
流動日報
朱克伯格:將重新打造 Facebook 找回過去的影響力
流動日報
【TGS2025】超高性能SSD,還有microSD卡!台北電玩展2025「威騰電子」展區報告!
Saiga NAK
搭載NVIDIA GeForce RTX 5080!ASUS ROG系列推出「ROG-ASTRAL-RTX5080-O16G-GAMING」!
Saiga NAK
「原神」Ver.5.4「夢間見明月」將於2月12日推出!新★5角色「夢見月瑞希」登場!
Saiga NAK
DeepSeek 在意大利 App Store、Google Play下架 或與當局對個人資料處理爭議有關
Unwire.hk
對 Adblock 用戶播 3 小時超長廣告 YouTube 官方否認故意顯示
Unwire.hk
印度 AI 崛起 未來數月內推自家研發基礎 AI 模型
Unwire.hk
Sanwa Supply推出附帶USB集線器的USB Type-C線「400-HUBC34」!
Saiga NAK
實況主Zerost從Sengoku Gaming轉戰「REJECT」
Saiga NAK
HUAWEI Pocket 3細摺新作消息初曝 繼續主打女性市場最快3月發佈
am730
性能測試直逼 Deepseek V3、Chat GPT4 地位 阿里雲發佈「通義千問」Qwen2.5-Max
Unwire.hk
Leica M11激罕100周年限量版相機 米蘭、紐約、東京及上海版各限量100部
am730
iPad 11規格再流出 傳用A16仿生晶片配6GBRAM 效能大增但未必有「呢個」功能
am730
「寶可夢大集結」亞洲冠軍爭奪國際賽事「PUACL2025 FINALS」於3月29日起在新宿舉行!
Saiga NAK
Tesla 自動駕駛的士服務六月推出 明年車主將可以把電動車變成的士
Unwire.hk
微軟 Copilot 免費開放 OpenAI o1 模型 Think Deeper 功能 每週僅能使用三次
流動日報
SANWA DIRECT新出萬能辦公椅「150-SNCM50BK」&「150-SNCM50GY」!
Saiga NAK
【評測】ZOTAC RTX 5080 AMP Extreme INFINITY 無限鏡燈效靚
Unwire.hk
「人中之龍8外傳 Pirates in Hawaii」的資訊介紹影片「RGG Like a Dragon Direct」日本語字幕版公開!
Saiga NAK
Tim Cook:iPhone 16 銷量勝 iPhone 15
流動日報
資安疑慮 美國會辦公室傳被警告勿用DeepSeek
VOCO News