本文是完整樂團採譜指南的一部分。
許多人剛接觸 AI 採譜時,就想知道能不能把整首歌裡同時演奏的鼓、貝斯、吉他和人聲分別寫成樂譜。現在已經做得到了。Songscription 的多樂器模式目前仍是測試版,能一次處理混音後的錄音,替每個樂器寫出獨立聲部。不過,這個問題其實包含兩件事:辨識同時響起的多個音,以及分開不同樂器。了解兩者的差別,就比較容易選對模式,得到更好的結果。
同時有多個音,還是多種樂器?
說到「同時有多種樂器」,有人指的是一個樂器奏出很多音,有人指的是好幾種樂器混在同一份錄音裡。
- 單一樂器同時奏出多個音,例如鋼琴彈出厚實的和弦。把這些音全部記下來叫做複音採譜,AI 已經很擅長處理這類音樂。
- 多種樂器同時演奏,例如整個樂團的混音錄音。系統得在採譜前或採譜時分辨每個聲音屬於哪種樂器,難度更高。多樂器模式處理的就是這個問題。
這是兩種不同的能力。同一個工具即使很擅長辨識複音,處理混在一起的不同樂器時,仍然可能遇到更多困難。單音與複音採譜的差別更詳細地說明了單一樂器採譜時,同時有幾個音會帶來什麼影響。
把同時響起的音記下來:複音採譜
目前的 AI 很擅長複音採譜。鋼琴彈出由 5 個音組成的和弦,內聲部的音還在變化。以前碰到這樣密集的演奏,就算受過聽音訓練,也得花很久才能逐一分辨;好的模型已經能清楚辨識。如果你要採譜的是一架鋼琴的多聲部演奏,AI 確實能處理。鋼琴複音採譜詳解說明了辨識方式,以及為什麼鋼琴是這項技術表現最好的樂器。
多種樂器一起演奏,一次採出各個聲部
整個樂團的錄音把不同樂器混成同一段聲音,各種樂器的頻率會重疊,也會互相遮蓋。貝斯的音可能藏在大鼓聲裡,吉他和弦也可能和鍵盤混在一起。要把每個樂器寫在各自的譜表上,系統得先判斷哪些音屬於哪個樂器,再採出各個聲部,排成樂譜。
Songscription 的多樂器模式會一次完成這些工作。在選擇樂器時改用多樂器模式,再上傳錄音,或貼上 YouTube、TikTok、Instagram 連結,就能取得包含多個譜表的樂譜。無論錄音裡是搖滾樂團的節奏組、管樂組,還是弦樂四重奏,辨識到的每個樂器都會各有獨立音軌。你也會拿到多軌 MIDI,能在 Ableton、Logic、FL Studio、GarageBand 等數位音樂工作站(DAW)裡開啟。鍵盤音軌會分成左手和右手。
多樂器模式仍在測試中,也還在持續改進。有些聲部需要用內建編輯器修整,尤其是好幾種樂器擠在同一個音域的地方。聲音清楚、各樂器音量平衡的錄音,辨識準確度最高。編制大、聲音密集的錄音最難處理,例如整個管弦樂團的錄音。這類錄音通常需要更多修整。合唱團則會採成一條人聲音軌,不會分別產生女高音、女低音、男高音和男低音聲部。如果你最在意的是其中一個聲部,單樂器模式仍然最容易得到準確的結果。
依照你要的樂譜選擇做法
目前有 3 種可靠的做法,能把多樂器錄音整理成好讀的樂譜。要選哪一種,取決於你想保留哪些聲部。
- 一次取得所有聲部。 選擇多樂器模式,上傳一次錄音,就能替各個樂器採譜,每個樂器都有獨立聲部。接著就能編輯樂譜,再下載 PDF、MIDI 或 MusicXML 檔案。
- 把一個聲部採得盡量準確。 在單樂器模式裡選擇那個樂器。模型會直接從完整混音中分辨出目標樂器,不必先把歌曲拆成分軌音檔。如果錄音特別密集,也可以先分離音軌,讓採譜結果有機會更準確。
- 整理成一份拿來演奏的樂譜。 選擇鋼琴改編、鋼琴加人聲或旋律和弦譜模式,把整首歌整理成一個聲部,通常用大譜表呈現。這樣更快就能照著譜演奏,也常常已經足夠。
完整樂團錄音採譜教學說明了多樂器模式的操作方式;把多軌音訊轉成樂譜則介紹怎麼從分軌音檔開始。如果想比較兩種做法的取捨,可以看一次採出全部聲部與逐一採譜的比較。不管用哪種做法,都能用音訊轉樂譜替任何錄音採譜。要用自己的歌試試多樂器模式,就從多樂器採譜頁面開始。
Songscription 能辨識哪些樂器?
多樂器模式能辨識鍵盤、吉他、貝斯、弦樂、銅管、木管、薩克斯風、合成器、人聲和鼓,也包括管風琴、鍵盤打擊樂器、豎琴與定音鼓,並替每個樂器寫出獨立聲部。
單樂器模式則使用各樂器專用的模型。鋼琴模型最成熟,也最擅長處理密集的複音;其他模型能處理吉他、貝斯、鼓,以及小號、薩克斯風、小提琴等樂器的旋律線。如果你最在意的是其中一個聲部,單樂器模式會讓模型專注在那個樂器上,採出的結果通常比一次處理全部樂器更準確。貝斯聲部採譜和用 AI 替鼓採譜都有這種做法的實例。
常見問題
AI 能同時為多種樂器採譜嗎?
能。Songscription 的多樂器模式(測試版)會一次處理混音後的錄音,替辨識到的鍵盤、吉他、貝斯、弦樂、銅管、木管、薩克斯風、合成器、人聲和鼓各自建立音軌,輸出包含多個譜表的樂譜和多軌 MIDI。這個模式仍在測試中,有些聲部還需要用內建編輯器修整;錄音越清楚,辨識準確度越高。如果你只想把其中一個聲部採得盡量準確,單樂器模式會直接從混音中分辨出那個樂器,不必先準備分軌音檔。
複音採譜和樂器分離有什麼差別?
複音採譜是把單一聲音來源同時奏出的多個音全部記下來,例如鋼琴和弦。樂器分離則是判斷混音裡哪些音屬於人聲、貝斯、吉他等不同樂器。前者要辨識同時響起的多個音,後者要把混在一起的樂器聲音分開。多樂器採譜需要同時處理這兩件事,所以整個樂團的錄音比單一樂器的清晰錄音更難採譜。
一首歌有好幾種樂器,要怎麼採譜?
依照你想拿到的樂譜選模式。如果要一次取得所有聲部,在 Songscription 裡選擇多樂器模式,再上傳錄音,辨識到的每個樂器就會各有獨立聲部。如果只想把一個聲部採得盡量準確,就在單樂器模式裡選擇那個樂器,直接從完整混音中採譜,不必先準備分軌音檔。如果想要一份拿來演奏的樂譜,就選鋼琴改編、鋼琴加人聲或旋律和弦譜模式,把整首歌整理成一個聲部。
Songscription 能替哪些樂器採譜?
多樂器模式(測試版)會一次為混音後的錄音採譜,辨識鍵盤、吉他、貝斯、弦樂、銅管、木管、薩克斯風、合成器、人聲和鼓,並替每個樂器寫出獨立聲部。單樂器模式中,鋼琴模型最成熟,也最擅長處理密集的複音演奏;其他模型能處理吉他、貝斯、鼓,以及小號、薩克斯風、小提琴等樂器的旋律線。單樂器模型通常能直接從完整混音中採出你要的樂器,所以分軌音檔不是必要條件。不過,錄音特別密集時,先分離音軌有機會讓結果更準確。
