教學採譜Andrew Carlins•閱讀時間:8 分鐘

如何用 AI 把整個樂團的錄音轉成樂譜

整個樂團的錄音最難轉成樂譜,因為好幾種樂器的聲音混在一起,互相遮蓋。Songscription 的多樂器模式(Multi-Instrument,目前為測試版)現在能一次轉寫整個樂團,為每種樂器寫出獨立聲部。怎麼使用這個模式?什麼時候適合只轉寫一種樂器,或把整首歌改編成鋼琴譜?

用 AI 把整個樂團的錄音轉成樂譜,多樂器模式為樂團中的每種樂器寫出獨立聲部

本文是整個樂團轉譜指南的一部分。

整個樂團的錄音最難轉成樂譜。鼓、貝斯、吉他、鍵盤和人聲同時出現在短短幾秒的錄音裡,聲音重疊、互相遮蓋,也佔用相同的頻率範圍。多年來,實際可行的做法只有把工作拆開,分別處理各種樂器。現在 Songscription 的多樂器模式(Multi-Instrument)能一次轉寫整個樂團,目前是測試版,所有人都能使用。

想一次取得所有聲部,就用多樂器模式。如果某個聲部需要盡可能準確,適合另外用單一樂器模式轉寫。只想自己把歌彈出來,則適合鋼琴改編模式。

目前能做到什麼

多樂器模式能一次處理整個樂團的錄音,為每種樂器寫出獨立音軌。除了鼓、貝斯、吉他、鍵盤和人聲,也能處理加上管樂和弦樂的編制。這個模式還在測試,會持續改進;有些聲部可能需要在內建編輯器裡修整,錄音清楚時準確度最高。

模型能辨識弦樂、銅管、木管、薩克斯風、合成器,以及鼓、貝斯等節奏組樂器。不過,合唱團只會轉成單一人聲軌,不會拆成女高音、女低音、男高音和男低音。需要把某個聲部轉得盡可能準確時,仍然能用單一樂器模式。

方法一:用多樂器模式轉寫整個樂團

只上傳一次就取得所有聲部,這是最快的方法。

  • 選擇樂器時,選「Multi-Instrument」,再上傳錄音檔案,或貼上 YouTube、TikTok 或 Instagram 連結。
  • Songscription 會一次轉寫整個樂團,產生一份多譜表樂譜。每種辨識到的樂器都有獨立聲部,例如鼓、貝斯、吉他、鍵盤、人聲,以及錄音裡的管樂或弦樂。每條鍵盤音軌都會分成左手和右手。
  • 和其他轉譜結果一樣,下載時可選 PDF、MIDI 或 MusicXML。多軌 MIDI 能在 Ableton、Logic、FL Studio 或 GarageBand 等數位音樂工作站(DAW)裡開啟,每種樂器都有各自的音軌。
  • 播放樂譜,和原錄音比對,再用內建編輯器修整不對的地方。混音裡聽得清楚的樂器通常轉得最好;其他聲音蓋住的聲部,需要多檢查一下。

想比較什麼時候適合一次轉寫所有樂器,請看一次轉寫與逐一轉寫樂器的比較。

方法二:一次只轉寫一種樂器

如果你特別在意某個聲部,就單獨轉寫它。選好樂器,例如貝斯,模型會直接從完整混音裡辨識並取出那個聲部,再寫成樂譜,不必先準備分軌音檔。模型只需要處理一種樂器,目標明確,通常能把這個聲部轉得最準確。

常見的做法是先用多樂器模式取得整個樂團的聲部,再把你要學或演出的聲部用單一樂器模式轉寫一次。每份轉譜結果都能在編輯器裡修改,也能各自匯出成 PDF、MIDI、MusicXML 或 Guitar Pro。

如果混音中的聲音特別密集,先做音訊分軌有機會讓個別聲部轉得更準確。音訊分軌工具會把混音拆成人聲、鼓、貝斯和其餘聲音。把清楚的分軌音檔交給 Songscription,模型就能更清楚地辨識目標聲部。音樂製作人已經在用這種做法,我們在音樂製作人的 AI 音樂工具一文裡有介紹。

想了解個別樂器的處理方式,請看貝斯線轉譜指南和用 AI 把鼓聲轉成樂譜。單音與複音轉譜的比較則說明了為什麼有些聲部比較容易從混音中辨識出來。

方法三:把整首歌改編成鋼琴譜

有時候,你只是想把歌彈出來,用不到一疊獨立聲部譜。鋼琴改編模式會聽完整首歌的混音,編成一份能用鋼琴彈奏的樂譜。原曲完全沒有鋼琴也能改編。鋼琴加人聲模式和旋律譜模式(lead sheet)也會用同樣的方式濃縮歌曲,保留歌曲主要內容,整理成一份樂譜。

如果目標是坐下來彈這首歌,這是最快的方法。把歌曲改編成鋼琴譜的指南說明了怎麼調整改編結果,也能從鋼琴編曲產生器開始製作。

依照你要的結果選方法

想一次上傳就快速取得樂團所有聲部,用多樂器模式,再到編輯器裡修整不準確的地方。需要某個聲部盡可能準確,就單獨轉寫那種樂器。想自己演奏整首歌,則選鋼琴改編模式或旋律譜模式。這些做法都不必先準備分軌音檔。

到音訊轉樂譜上傳錄音,選擇多樂器模式,就能把整個樂團的聲部寫在樂譜上。從多樂器轉譜頁面開始最快。

常見問題

AI 能一次把整個樂團的錄音轉成樂譜嗎?

能。Songscription 的多樂器模式(Multi-Instrument,目前為測試版)能一次轉寫整個樂團的錄音,為辨識到的每種樂器寫出獨立聲部,包括鼓、貝斯、吉他、鍵盤、人聲、管樂和弦樂。結果包含一份多譜表樂譜和多軌 MIDI。選擇樂器時,選「Multi-Instrument」,再上傳檔案或貼上 YouTube、TikTok 或 Instagram 連結。這個模式還在測試,有些聲部可能需要在內建編輯器裡修整;錄音越清楚,轉譜也越準確。

一首歌有好幾種樂器,要怎麼轉成樂譜?

選擇多樂器模式並上傳錄音,就能一次取得樂團所有聲部。如果你特別在意某個聲部,再用單一樂器模式轉寫一次。選好樂器後,模型會直接從混音中辨識並取出那個聲部,不必先準備分軌音檔。這樣能把你最在意的聲部轉得最準確。如果混音中的聲音很密集,也能先做音訊分軌,進一步提高個別聲部的準確度。

想取得一份能自己演奏整首歌的樂譜,最簡單的方法是什麼?

用鋼琴改編模式。它會聽完整首歌的混音,編成一份能用鋼琴彈奏的樂譜,不必逐一寫出每種樂器。原曲完全沒有鋼琴也能改編。鋼琴加人聲模式和旋律譜模式也會用同樣的方式濃縮歌曲。你拿到的是保留歌曲主要內容的一份樂譜,不必分別處理一疊聲部譜。想自己把歌彈出來,這是最快的方法。

為什麼樂團錄音轉成樂譜後,通常沒有獨奏錄音那麼準確?

好幾種樂器會佔用相同的頻率範圍,聲音重疊,也會互相遮蓋。例如大鼓有時會蓋過貝斯的音,吉他和弦也可能和鍵盤聲混在一起。模型得從這些混在一起的聲音中辨識出各個聲部。所以錄音清楚、各樂器音量平衡時,多樂器模式最準確。只用單一樂器模式轉寫你需要的聲部,或換一份更清楚的錄音,也有機會明顯改善結果。

關於作者

Andrew Carlins

作者

Andrew Carlins

Songscription 共同創辦人兼執行長

Andrew 和幾位音樂人在史丹佛一起創辦了 Songscription,因為大家都受夠了想演奏一首歌,卻找不到樂譜的情況。他從小彈鋼琴、吹上低音薩克斯風,也演過音樂劇。雖然已經好幾年沒登台,他倒覺得自己還有兩下子。他的文章聊的是怎麼把錄音裡的歌寫成樂譜。

認識我們的團隊

閱讀更多相同主題的文章。