教學採譜Andrew Carlins•閱讀時間:11 分鐘

用 AI 把自己的錄音轉成鋼琴樂譜

手機錄下的鋼琴獨奏、數位鋼琴錄下的 MIDI、自己歌曲的樂團錄音,現在都能透過 AI 轉譜,一次產生鋼琴樂譜草稿。來源不同,前後要處理的事也不同。

用 AI 把自己的錄音轉成鋼琴樂譜:鋼琴獨奏、數位鋼琴 MIDI、樂團錄音與草稿校對

本文是我們的音樂轉譜與樂譜工具推薦指南的一部分。

以前,要把自己的錄音寫成鋼琴樂譜,得花上不少時間。打開記譜軟體,把錄音切成短短幾段反覆聽,逐音輸入,再修正節奏,接著處理下一段 8 小節。現在,AI 用幾分鐘處理音訊,再加上一輪校對,就能完成原本大部分的工作。不過,來源選得好不好、知不知道該檢查哪些地方,仍然會影響最後的結果。

用手機錄下自己彈的鋼琴獨奏、把數位鋼琴的演奏直接錄成 MIDI,或是把自己寫的歌錄成完整的樂團版本,都是音樂人常遇到的情況。這些來源轉成鋼琴樂譜的流程大致相同,只是每一種都有不同的地方要留意。

「自己的錄音」包括哪些來源?

先選好來源,再挑工具。來源越清楚、干擾越少,後面要修改的地方就越少。常見的起點有這幾種:

  • 用手機、USB 麥克風或數位鋼琴錄下自己的鋼琴獨奏。錄音裡的樂器和要寫成的樂譜都是鋼琴,這是最容易處理的情況。
  • 把數位鋼琴的演奏直接錄成 MIDI。這比任何音訊錄音都更乾淨,因為完全省掉音訊轉 MIDI 的步驟,只剩下把 MIDI 整理成樂譜。
  • 把自己的一首歌錄成完整的樂團版本。錄音裡也許已經有鋼琴聲部,也許你想把整首歌改編成鋼琴版。這是兩件不同的事,處理方式也不同。

這幾種來源都能轉成鋼琴樂譜,流程中間都會用到 AI 轉譜。至於轉譜前要準備什麼、轉譜後要修改什麼,就要看你從哪一種來源開始。

為什麼鋼琴轉譜比較難?

鋼琴經常同時有多個聲部,比起只演奏單一旋律線的樂器,更難辨識。模型處理吉他的單音主旋律時,同一時間只要辨識一個音高;處理鋼琴時,卻常常得一次辨識 5、6 個音,再判斷哪些交給右手、哪些交給左手。前一個和弦的音還沒結束,下一個和弦就進來了,模型也得分清楚這些重疊的聲音。

目前較好的鋼琴轉譜工具,已經能處理大部分的素材。專門用鋼琴錄音訓練的模型,更擅長處理這些情況。通用的音訊轉 MIDI 工具,通常能從鋼琴錄音裡辨識出可用的旋律;要產生清楚的雙手樂譜,並把和弦音安排得合理,還是得靠鋼琴專用模型。Songscription 的鋼琴轉譜就是針對這種情況設計的。

從錄音到樂譜的流程

步驟 1:挑選來源,必要時改善錄音

錄音品質比工具選擇更影響結果。同一段演奏,在安靜的房間裡把麥克風放在鋼琴旁錄音,轉譜結果會比在公寓另一頭用手機錄下來準得多。手邊有更清楚的版本,就用那一份。如果只有手機錄音,也不用丟掉。現在的模型處理手機錄音已經有不錯的結果,只是後面會多花一些時間修改。

步驟 2:決定要轉出哪一部分

鋼琴獨奏直接轉譜就好。其他錄音則要先決定是要轉出原本就有的鋼琴聲部,例如樂團錄音裡的鍵盤聲部,還是把整首歌改編成鋼琴版。前者要先分離出鋼琴分軌音檔,再拿去轉譜;後者則要先辨識旋律和和弦變化,再重新編成鋼琴曲。

步驟 3:把音訊交給鋼琴專用的 AI 轉譜工具

把檔案上傳到專門處理鋼琴的工具。Songscription能把音訊直接轉成鋼琴樂譜,並匯出 PDF、MusicXML 和 MIDI。轉出的是樂譜草稿,你能直接看譜,也能在鋼琴捲簾裡修改後再匯出。想進一步了解背後的技術,以及音訊如何轉成 MIDI,請參考我們的音訊轉 MIDI 指南。

步驟 4:對照原始錄音校對

播放原始錄音,和轉譜結果對照,比只看樂譜更快找出錯誤。留意有沒有漏音、多出來的音、低音差了一個八度,或是原本持續的音提早結束,造成節奏錯誤。這時最適合用能和原始音訊同步播放的鋼琴捲簾編輯器,移動播放位置找到出錯的地方,就在那裡修正。

步驟 5:匯出,或到記譜軟體裡繼續整理

如果要把樂譜交給演奏者、列印出來自己練習,或分享給學生,通常直接從鋼琴轉譜工具匯出的 PDF 就夠用了。我們的鋼琴樂譜匯出 PDF 指南整理了不同工具的匯出選項,也附上匯出前的簡短檢查清單。

如果要加入選奏段落(ossia)、自己標指法,或細修譜面排版,就匯出 MusicXML,再用 MuseScore、Dorico 或其他記譜軟體開啟。MusicXML 會保留音符、節奏、左右手分配,以及大部分的奏法記號。若想先保留 MIDI,繼續修改聲部之後再寫成樂譜,我們的原創錄音轉 MIDI 指南說明了這個流程。

不同來源怎麼處理?

鋼琴獨奏錄音

鋼琴獨奏最容易處理,AI 轉譜的結果也通常最乾淨。把只有鋼琴的錄音交給鋼琴專用模型,第一次轉出的草稿通常就聽得出原本的演奏。修改多半集中在少數地方,例如快速音群漏了一個音、持續的和弦裡某個聲部提早結束,或是很低的音偶爾差了一個八度。長度 3、4 分鐘的曲子,大約留 10–20 分鐘修改。

自己歌曲的完整樂團錄音

所有樂器混在一起的錄音最難辨識,通常先分離音軌,再轉譜,效果最好。先用 Moises、LALAL.AI 或類似工具分離音軌,再單獨把鋼琴分軌音檔拿去轉譜。

如果原曲根本沒有鋼琴,例如以吉他為主的歌,直接編一個鋼琴版本會更合適。這時要先抓出旋律、整理出和弦譜,原本各個樂器怎麼編反而比較次要。先把旋律和和弦轉出來,再自己編成鋼琴版,或使用 Songscription 的鋼琴編曲產生器。它會根據旋律和和弦進行,依照你選的難度,產生能實際彈奏的鋼琴編曲。

產出的內容仍然需要修改,還不能直接當成完成的編曲。不過,用這份草稿把吉他為主的歌改成鋼琴版,通常比從頭開始編曲快。

數位鋼琴直接錄下的 MIDI

從數位鋼琴直接錄成 MIDI,就省掉了流程裡最難的音訊辨識。音高和各個音出現的時間都已經準確記錄,只要把 MIDI 整理成樂譜。後面要處理的是記譜和排版上的選擇,例如左右手怎麼分、聲部怎麼安排、節奏怎麼寫,而不是修正辨識錯誤。

如果錄音時能同時錄下 MIDI,或直接改錄 MIDI,就採用這個方式。我們的鋼琴編曲指南說明了這個階段要做的記譜選擇。

AI 草稿要修哪些地方?

目前再好的鋼琴轉譜模型,也會有漏掉的細節。錯誤通常集中在幾個地方:

  • 各種模型都比較難辨識譜表下方很低的音。最下面那個八度的音,最好逐一聽過確認。
  • 延音踏板用得多的段落,音跟音容易混在一起。模型有時會漏掉新彈下的音,有時又讓音持續太久,通常在鋼琴捲簾裡針對幾個地方修改就能修好。
  • 如果持續的內聲部比旋律和低音小聲,其他聲音就容易蓋過它。你知道內聲部還在,就手動把漏掉的音補上。

修改時把時間花在這些地方就好,不必因為這些錯誤放棄整份草稿。熟悉錄音的音樂人,通常幾分鐘就能修好,比從空白頁開始寫整首曲子快得多。

草稿完成之後

有了 AI 轉譜,把自己的錄音寫成樂譜時,最花時間的工作也變了。5 年前,慢的是把每個音寫到譜上;現在,時間主要花在後續的整理。哪些音要保留、哪些地方要簡化、和弦音怎麼重新配置才清楚、哪裡該加指法,這些仍然要由你決定,也更需要音樂人的判斷。

如果一直因為不想逐音輸入而沒把自己的音樂寫成樂譜,現在能先從 AI 草稿開始。不管是在巡演巴士上用手機錄下、帶著雜音的片段,還是乾淨的錄音室版本,都能產生可用的草稿。要處理自己的錄音,歌曲轉鋼琴工具大約 1 分鐘就能轉出鋼琴樂譜和鋼琴捲簾。鋼琴捲簾會跟著音樂播放,你能跟著彈。接著在草稿上保留、刪改或補上內容,就能整理出你自己的樂譜版本。

常見問題

怎麼把錄音轉成鋼琴樂譜?

選手邊最清楚、干擾最少的錄音,交給專門處理鋼琴的 AI 轉譜工具,再對照原始錄音校對草稿,匯出 PDF、MusicXML 或 MIDI。鋼琴獨奏通常轉得最準;整團合奏的錄音,通常先分離音軌再轉譜,結果會比較好。轉出的內容還需要在鋼琴捲簾裡修改,不能直接當成完成的樂譜。

為什麼鋼琴比其他樂器更難轉譜?

鋼琴常常同時彈出好幾個音,模型得一次辨識 5、6 個音,分配給左右手,還要處理前一個和弦的音延續到下一個和弦的情況。只演奏單一旋律線的樂器,同一時間只有一個音高要辨識。因此,比起通用的音訊轉 MIDI 工具,專門處理鋼琴的模型更擅長產生清楚的雙手樂譜。

轉譜後大概要花多久修改?

如果是鋼琴獨奏,長度 3、4 分鐘的曲子,大約要留 10–20 分鐘修改。錯誤通常集中在很低的音、延音踏板用得多的段落,以及音量較小的內聲部。熟悉錄音的音樂人,在鋼琴捲簾裡通常很快就能修好,比從空白頁開始逐音寫譜快得多。

關於作者

Andrew Carlins

作者

Andrew Carlins

Songscription 共同創辦人兼執行長

Andrew 和幾位音樂人在史丹佛一起創辦了 Songscription,因為大家都受夠了想演奏一首歌,卻找不到樂譜的情況。他從小彈鋼琴、吹上低音薩克斯風,也演過音樂劇。雖然已經好幾年沒登台,他倒覺得自己還有兩下子。他的文章聊的是怎麼把錄音裡的歌寫成樂譜。

認識我們的團隊

閱讀更多相同主題的文章。