科技

人工智能分拆音軌的時代

SPILL
更新於 2021年05月28日10:13 • 發布於 2021年05月29日03:43 • 余彤雪

筆者多年前和音樂業界友人閒談中,偶爾間說起關於樂手們聽歌曲時常會有將歌者的人聲,或不同樂器獨立聆聽的需要。一方面他們要清晰無誤地聆聽不同的人聲和樂器,分析每件不同樂器的編排、音調和節奏;另一方面,如果你是彈奏某樂器的樂手或者是樂器的學習者,你更加經常要用心細聽某樂器的內容,如音調、音色、拍子等。在沒有樂譜的情況下,多數也需要反覆聆聽無數次才可以。如果有獨立的對應音軌便會是一大的方便。

其實,在音樂製作的過程中,每一件樂器、人聲、和聲等,原本都是由很多獨立的音頻軌道去錄製、處理和混音,一般可上至幾十條的音軌。

廣告(請繼續閱讀本文)

而製成的歌曲多數都是混合成左右兩聲道的音訊。因為人是用左、右耳來聽聲音的。所以傳統上 CD、MP3 和不同的歌曲檔,最後都是混合成兩個聲道的。

當初筆者忽發奇想,如果唱片公司發行的歌曲檔可以原來獨立不同音軌的型式去發售,那便可以為想獨立聆聽不同樂器或人聲的人,例如樂器學習者、樂手、愛聽各種樂器聲編排的人,提供更直接方便的途徑去聽不同的獨立音軌。 不單如此,這樣可以令歌曲銷售更多元化。增加聽眾對不同歌曲內容的欣賞度和不同樂器聲音的認知度。當然這樣還要配合播放的器材和軟件的功能,甚至解碼能力才能好好實現。

早年音樂製作常會用 MIDI(Musical Instrument Digital Interface)檔,其實就是包含不同樂器的音軌,並可方便播放和處理的音頻應用檔,很多音樂人也有用到,可以對應樂譜作不同的改動,可惜如果沒有對應的 DAW(Digital Audio Workstation)、音頻處理軟件和一些較好質素的聲音庫,就不能準確地聽到優質而真實的樂器聲音。如非音樂工作者便難以簡化地以電腦或手機即播即聽了。

廣告(請繼續閱讀本文)

然而,這個念頭只是多年前的一個想法,多年後的今日,電腦硬件和軟件的發展神速,人工智能 AI(Artificial Intelligence)的應用得以廣泛使用,不少聲音運算法已經可以從一些複雜的聲音源分離出不同性質和類型的聲音,最常見的是人聲分離的應用,多年前有一種人聲消除的傳統方法,所謂的 vocal remover,給人作唱歌的用途,它是以一些簡單的相位加減和濾波的音頻處理方法,把原有歌曲中的人聲去除,然而效果很一般,往往不能把人聲完全去除。而且也影響歌曲的保真度。

到 90 年代有了 karaoke,因為人聲音軌和音樂音軌是獨立出來,用家便能方便地完全去除人聲,但也只限於人聲的開關。

廣告(請繼續閱讀本文)

音頻運算法分離人聲的技術近年也多數應用在消除噪音功能之上,例如通訊系統的通話功能上,主要分離出所需的語音,把非語音的雜音去除,用以增強人聲語音的保真度和準確度,又例如新型助聽器,把對話和人聲訊息分離出來,增強用家對人聲訊息的清晰度等。

人聲分離也很常用於擷取伴奏音樂的用途,把一般兩聲道的歌曲人聲分離出來,剩下的伴奏可作音樂編裝、伴唱、伴奏音樂 MMO(Music Minus One)的用途等。

有了 AI 運算法,我們將能更輕易從一個原本已經混音的立體聲道歌曲檔中分離出內裡不同成份的音軌,例如人聲、鼓聲、鋼琴、結他和其他不同樂器,甚至是非音樂成份的環境聲等。

這些強大的運算法都受惠於日催成熟的機器學習(machine learning)和大數據(big data),例如 wave–U–net 軟件,不同種類的聲音和音色可被其頻譜分析出來,不同樂器或人聲的特徵就如一堆大數據,再讓軟件不斷學習,並能更準確和有效地從混合了的聲頻中分離出不同類型的聲音出來。

所以,筆者多年前覺得很不可思義的事情,今日都能一一實現。 而這些技術更可衍生很多不同的應用,如歌曲學習、樂器同步訓練、新型助聽器、抗噪音功能、智能音箱、聲紋認證等,令音頻的產品功能更優質和更多元化。

近來也有不少線上即時運作的聲音分離軟件,如「Moises: AI Music Platform」可以很方便地讓用家體驗這些音頻分離技術的威力,用家只要把一般歌曲的mp3 檔上傳到網站,簡單幾個選項按鍵,不出一兩分鐘便會分離出所需的獨立音軌,大家不妨一試。

不同音軌的選擇包括:

1 條音軌(無鼓)
2 條音軌(無鼓、無低音結他)
1 條音軌(只有人聲、鼓、低音結他)
2 條音軌(人聲、伴奏)
4 條音軌(人聲、貝斯、鼓、其他)
5 條音軌(人聲、貝斯、鼓、鋼琴、其他)

音頻的科技應用隨著微處理器的速度增強,從而能讓速度要求更高的智能演算法和相關的機器學習軟件發揮更強及更多元化的功能,讓聲音的處理更有效和更方便快捷。大家一起期待人工智能為消費者帶來喜悅的時代吧。

按此了解更多影音資訊

請瀏覽 SPILL 網站及關注旗下社交平台: 

MeWe:@spill
Facebook:@spillhk
Instagram:@spillhk
YouTube:@spillhk

訂閱 SPILL Paper 電子通訊,為你送上電郵限定的精選新聞,以及不同欄目的深度報導,評測、觀點、專題,包羅萬有。

查看原始文章

更多 科技 相關文章

華為正式棄用 Windows 余承東:華為 PC 將全部用鴻蒙
Unwire.hk
淘寶不再提供香港順豐直運/集運選項 繼續集運用順豐智能櫃方法
Unwire.hk
蘋果揭示 iPhone 16 電池更換新方法 需使用 9V 電池
流動日報
LinkedIn 內容被用作訓練 AI 未更新使用條款先收集數據引發爭議
Unwire.hk
Cybertruck 改裝戰車被遙距禁用 車臣首領指責 Elon Musk「這樣做不太好」
Unwire.hk
【評測】iPhone 16 / 16 Pro 新實體影相按鈕 + 大量新相機鏡頭試相 + 無線充電實試
Unwire.hk
Harmony OS|華為手機應用分身教學 一部機三WhatsAPP完全無難度
am730
iPhone 16 Pro 拆解影片 揭開電池秘密
流動日報
小米更改銷售策略奏效 超越 Apple 成全球智能手機市場第二
Unwire.hk
華爾街日報:Qualcomm 擬收購 Intel 消息指雙方正洽談中
Unwire.hk
Apple 官方推出 iPhone 換電攻略 協助用戶輕鬆維修
Unwire.hk
YouTube 廣告將無處不在 官方落實暫停畫面播廣告
Unwire.hk
【報價】Huawei Mate XT 國行殺入香港市場 首批定價 7 萬有找有價有市
Unwire.hk
macOS Sequoia 更新 導致 VPN 及防毒軟體崩潰
流動日報
蘋果正調查 M4 iPad Pro 更新 iPadOS 18 故障問題
流動日報
八達通 iPhone 16 特別版手機卡面 卡面商店免費下載
Unwire.hk
華爾街日報:Qualcomm 正考慮全面收購 Intel
流動日報
Apple 透露五大設計改進 iPhone 16 系列維修更容易
Unwire.hk
傳 MacBook Air 零件供應商面臨審查 良率欠佳訂單將暫時轉到其他供應商
Unwire.hk
Momax銅鑼灣新店開業優惠 首3天全店9折、免費送iPhone 16手機殼
am730
長江存儲成功用中國設備製 SSD 必須晶片 成功替代部份美系設備
Unwire.hk
歐盟籌組電池開發聯盟 提升固態電池密度超過 25%
Unwire.hk
iPhone 16 Pro Max 先達收機價最多賺 $2,300 iPhone 16 Pro 部分型號只加$1收
Unwire.hk
《星鳴特攻 Concord》製作總監辭職 為遊戲災難級表現負責
Unwire.hk
Netflix 將推出 Civilization VI 與 Street Fighter IV 免費供訂戶遊玩
流動日報
e新品:灰色PS5主機賀30歲牛一
明報
HONOR 9.2毫米最薄「大摺機」 隨手拍攝唯美人像
明報
人工智能×百年光學技術 vivo $4298手機盡玩蔡司散景
明報
FUJIFILM instax流動車出沒注意 免費試玩mini 99即影即有相機
am730
瀏覽器 Chrome 更新 添加頁面跨裝置自動同步等新功能
Unwire.hk
韓國 Kia 進軍商用電動車市場 配備快速充電 PV5、PV7 電動客貨車發表
Unwire.hk
Gravity Game Arise將在「東京電玩展2024」展出!包括「神箱」等話題作品共有 9 款作品可供試玩!
Saiga NAK