科技

人工智能分拆音軌的時代

SPILL
更新於 2021年05月28日10:13 • 發布於 2021年05月29日03:43 • 余彤雪

筆者多年前和音樂業界友人閒談中,偶爾間說起關於樂手們聽歌曲時常會有將歌者的人聲,或不同樂器獨立聆聽的需要。一方面他們要清晰無誤地聆聽不同的人聲和樂器,分析每件不同樂器的編排、音調和節奏;另一方面,如果你是彈奏某樂器的樂手或者是樂器的學習者,你更加經常要用心細聽某樂器的內容,如音調、音色、拍子等。在沒有樂譜的情況下,多數也需要反覆聆聽無數次才可以。如果有獨立的對應音軌便會是一大的方便。

其實,在音樂製作的過程中,每一件樂器、人聲、和聲等,原本都是由很多獨立的音頻軌道去錄製、處理和混音,一般可上至幾十條的音軌。

廣告(請繼續閱讀本文)

而製成的歌曲多數都是混合成左右兩聲道的音訊。因為人是用左、右耳來聽聲音的。所以傳統上 CD、MP3 和不同的歌曲檔,最後都是混合成兩個聲道的。

當初筆者忽發奇想,如果唱片公司發行的歌曲檔可以原來獨立不同音軌的型式去發售,那便可以為想獨立聆聽不同樂器或人聲的人,例如樂器學習者、樂手、愛聽各種樂器聲編排的人,提供更直接方便的途徑去聽不同的獨立音軌。 不單如此,這樣可以令歌曲銷售更多元化。增加聽眾對不同歌曲內容的欣賞度和不同樂器聲音的認知度。當然這樣還要配合播放的器材和軟件的功能,甚至解碼能力才能好好實現。

早年音樂製作常會用 MIDI(Musical Instrument Digital Interface)檔,其實就是包含不同樂器的音軌,並可方便播放和處理的音頻應用檔,很多音樂人也有用到,可以對應樂譜作不同的改動,可惜如果沒有對應的 DAW(Digital Audio Workstation)、音頻處理軟件和一些較好質素的聲音庫,就不能準確地聽到優質而真實的樂器聲音。如非音樂工作者便難以簡化地以電腦或手機即播即聽了。

廣告(請繼續閱讀本文)

然而,這個念頭只是多年前的一個想法,多年後的今日,電腦硬件和軟件的發展神速,人工智能 AI(Artificial Intelligence)的應用得以廣泛使用,不少聲音運算法已經可以從一些複雜的聲音源分離出不同性質和類型的聲音,最常見的是人聲分離的應用,多年前有一種人聲消除的傳統方法,所謂的 vocal remover,給人作唱歌的用途,它是以一些簡單的相位加減和濾波的音頻處理方法,把原有歌曲中的人聲去除,然而效果很一般,往往不能把人聲完全去除。而且也影響歌曲的保真度。

到 90 年代有了 karaoke,因為人聲音軌和音樂音軌是獨立出來,用家便能方便地完全去除人聲,但也只限於人聲的開關。

廣告(請繼續閱讀本文)

音頻運算法分離人聲的技術近年也多數應用在消除噪音功能之上,例如通訊系統的通話功能上,主要分離出所需的語音,把非語音的雜音去除,用以增強人聲語音的保真度和準確度,又例如新型助聽器,把對話和人聲訊息分離出來,增強用家對人聲訊息的清晰度等。

人聲分離也很常用於擷取伴奏音樂的用途,把一般兩聲道的歌曲人聲分離出來,剩下的伴奏可作音樂編裝、伴唱、伴奏音樂 MMO(Music Minus One)的用途等。

有了 AI 運算法,我們將能更輕易從一個原本已經混音的立體聲道歌曲檔中分離出內裡不同成份的音軌,例如人聲、鼓聲、鋼琴、結他和其他不同樂器,甚至是非音樂成份的環境聲等。

這些強大的運算法都受惠於日催成熟的機器學習(machine learning)和大數據(big data),例如 wave–U–net 軟件,不同種類的聲音和音色可被其頻譜分析出來,不同樂器或人聲的特徵就如一堆大數據,再讓軟件不斷學習,並能更準確和有效地從混合了的聲頻中分離出不同類型的聲音出來。

所以,筆者多年前覺得很不可思義的事情,今日都能一一實現。 而這些技術更可衍生很多不同的應用,如歌曲學習、樂器同步訓練、新型助聽器、抗噪音功能、智能音箱、聲紋認證等,令音頻的產品功能更優質和更多元化。

近來也有不少線上即時運作的聲音分離軟件,如「Moises: AI Music Platform」可以很方便地讓用家體驗這些音頻分離技術的威力,用家只要把一般歌曲的mp3 檔上傳到網站,簡單幾個選項按鍵,不出一兩分鐘便會分離出所需的獨立音軌,大家不妨一試。

不同音軌的選擇包括:

1 條音軌(無鼓)
2 條音軌(無鼓、無低音結他)
1 條音軌(只有人聲、鼓、低音結他)
2 條音軌(人聲、伴奏)
4 條音軌(人聲、貝斯、鼓、其他)
5 條音軌(人聲、貝斯、鼓、鋼琴、其他)

音頻的科技應用隨著微處理器的速度增強,從而能讓速度要求更高的智能演算法和相關的機器學習軟件發揮更強及更多元化的功能,讓聲音的處理更有效和更方便快捷。大家一起期待人工智能為消費者帶來喜悅的時代吧。

按此了解更多影音資訊

請瀏覽 SPILL 網站及關注旗下社交平台: 

MeWe:@spill
Facebook:@spillhk
Instagram:@spillhk
YouTube:@spillhk

訂閱 SPILL Paper 電子通訊,為你送上電郵限定的精選新聞,以及不同欄目的深度報導,評測、觀點、專題,包羅萬有。

查看原始文章

更多 科技 相關文章

百度 AI 眼鏡最快明年初上市 支援「文心一言」語音互動
Unwire.hk
航拍10大構圖技巧 助你用無人機拍出心水靚相
am730
M4 Mac mini 採用可拆卸 SSD 設計 256GB 用雙模組速度顯著提升
流動日報
【評測】Mac mini M4 2024:進階用家最應該買的 Apple 電腦 效能、日常應用詳細評測分析
Unwire.hk
華為新一代流動處理器 Kirin 9100 被爆升級 6nm 製程技術
Unwire.hk
美警方:iOS 18 會莫名自動重啟 增執法解鎖搜證難度
Unwire.hk
Samsung 擬推極薄 Galaxy S25 挑戰 iPhone 17 Air
流動日報
【評測】MacBook Pro M4 2024 詳細效能評測 + 選購指南分析 7 大要點
Unwire.hk
六年磨一劍 GIMP 3.0 RC1 正式發佈
流動日報
macOS 高耗電模式擴展至 M4 Pro MBP 與 Mac mini
流動日報
台積電暫停為多家中國公司生產 AI 晶片 封殺 7 納米製程
流動日報
迎接 PS5 Pro PS5 出貨按年跌 22%
流動日報
或於短期上市,HUAWEI Mate 70 系列規格完整曝光!
Mobile Magazine
ASUS ROG Phone 9 將於11月19日在港發佈!
Mobile Magazine
iPhone 18 Pro 傳將使用可變光圈相機快門
流動日報
高達登陸Momax銅鑼灣店 3色磁吸行動電源、旅行充電插座、拖板實用有型
am730
Mate 70實機圖傳出 華為史上最強Mate規格包括5000萬像素主鏡頭
am730
豐澤開倉荃灣特賣場登記抽籤 預告iPhone 15、iPad及Apple Watch有價減
am730
2025「無線吸塵器推薦」12款!吸力強、設計感、方便清潔的款式 | Women's Health
Women’s Health
【機價行情】Nothing 雙 11 快閃優惠!Ear 耳機最平 $639、CMF Watch Pro 同減
Mobile Magazine
「SEGA 11月推薦優惠」活動開跑!「真・女神轉生V」「女神異聞錄5」等多款遊戲最多可享75%OFF折扣!
Saiga NAK
涉及貪污總金額多達 10 億 網易遊戲多名高層被帶走調查
Unwire.hk
LOL日本大賽「LJL 2025」舉辦概要和品牌重塑詳情!任何人可以參賽的開放預選等情報陸續公開
Saiga NAK
CSL Mobile獨家發售PlayStation®5 Pro主機
am730
Nikon Z50II 登場 EXPEED 7 影像處理引擎 + 1 秒「釋放前拍攝」
Unwire.hk
Nothing雙11快閃優惠 人氣藍牙耳機75折、智能手錶$399
am730
耀才客戶帳戶疑遭黑客操控買中國金石 警方證實已接獲相關報案
Unwire.hk
「星之卡比」×「鶴屋吉信」的聯名和菓子「卡比的圓滾滾手作最中」迎來5週年紀念!全新聯名和菓子將於11月15日(五)起於店內販售!
Saiga NAK
突破 DRM 限制 Netflix 推出新功能支援影片截圖分享
流動日報
為解決 iPhone 16 禁售問題 Apple 建議向印尼投資 1,000 萬美元
Unwire.hk
Google 全新 AI 助手意外曝光 Jarvis 可直接替用家行動例如購物
Unwire.hk
Windows 11小畫家及記事本將有AI功能 可生成及刪除圖像、重寫文字
am730
卡普空「龍族教義2 原聲帶」預計11月21日推出!可收聽冒險中不可或缺的樂曲
Saiga NAK
強化玻璃 Gorilla Glass 生產商 Corning 遭歐盟反壟斷調查
Unwire.hk
ROG首款搭載快速觸發功能的電競鍵盤「ROG Falchion Ace HFX」開放預購!11月22日上市
Saiga NAK
澳洲禁 16 歲以下少年使用社交平台 社交媒體需驗證用戶年齡
Unwire.hk
【恐報在線】生意好呀!朋友仔鍾意玩扶手電梯? 陳法齊師傅巡先達睇風水兼搵鬼仔
報紙佬
Apple Store 將縮減 Vision Pro 展示區域
流動日報
macOS Sequoia 15.2 強化 AirPlay 功能 可指定顯示 App 視窗畫面
流動日報
「SCARZ SCARZ電竸賽車表演日」將於東京大丸舉辦! TakuAn、Miyazono推廣跑車浪漫旅的魅力
Saiga NAK