跳到主要內容

ChatGPT 能把歌曲轉成樂譜嗎?

資源閱讀時間:7 分鐘Andrew Carlins

每天都有人請 ChatGPT 把錄音轉成樂譜。一般 AI 聊天機器人能拿音訊做什麼、做不到什麼?為什麼它們寫不出可靠的樂譜?又該用什麼工具來轉譜?

本文是音樂轉譜工具選擇指南的一部分。

ChatGPT 無法聽完一段錄音就寫出準確的樂譜。它是處理文字的語言模型,能討論記譜、建議和弦進行,或把你用文字描述的簡單旋律寫下來。要把真正的音訊轉成正確的多聲部樂譜,得辨識音高、分析節奏,還需要專門的轉譜模型。把這件事交給一般聊天機器人,它會很有把握地給你錯誤的音符。

學音樂、理解樂理時,ChatGPT 仍然很有幫助。先分清楚哪些工作是在處理文字,哪些需要分析聲音訊號,再選工具。文字是它擅長的部分;訊號處理則不是。

ChatGPT 能幫忙做哪些音樂工作?

只要內容能用文字和樂理來討論,ChatGPT 就能幫上忙:

  • 解釋樂理。 問它一段和弦進行為什麼會這樣解決、什麼是拿坡里六和弦,或怎麼替小調音階配和聲,通常能得到清楚、大致可靠的解釋。
  • 閱讀並討論你貼上的文字記譜。 貼上 ABC 記譜、和弦譜,或用文字描述一段音樂,它就能說明音樂內容、指出和弦名稱,也能提出修改建議。
  • 建議和弦進行。 告訴它想要的情緒或調性,它會提出和弦進行、重新配和聲的方式,或低音旋律的點子,讓你試奏。
  • 寫出簡單的單聲部旋律。 用文字描述曲調,它能寫成 ABC 記譜或簡單的 MusicXML 片段,再由你貼進樂譜編輯器。

這些工作都從文字或描述開始,最後也以文字呈現。ChatGPT 是根據音樂符號推理,並沒有在聽聲音。輸入一旦換成真正的錄音,就超出了它能處理的範圍。

為什麼它無法把錄音轉成樂譜?

音訊轉譜是很難的訊號處理問題。模型得辨識每個音的音高,找出準確的起音與結束時間,再分辨同時響起的音,例如和弦裡的各個音,或整首歌的混音裡交疊的聲部。接著要把時間位置與長度量化成容易讀的節奏,才能依照正確的調號和拍號,把音符寫到譜表上。每個步驟都需要用音訊訓練的專門模型。

一般語言模型沒有受過這種聲音辨識訓練。即使現在有些聊天模型接受音訊,訓練的重點也是語音轉文字,不是音樂記譜。它們沒有可靠的內部流程來完成上面那些工作。因此,上傳歌曲後請它列出音符,它就會像語言模型面對不確定資訊時那樣,產生流暢、肯定的回答。內容看起來像樂譜,卻塞滿根本沒人演奏過的音符。語氣越像專業解答,錯誤就越難察覺。AI 音樂轉譜如何運作逐步解釋了真正的轉譜過程。

該用什麼工具轉譜?

要把音訊轉成樂譜,請用專門的轉譜工具。在 Songscription 裡上傳音訊檔案或貼上影片連結,模型就會辨識音符,產生可編輯的樂譜、MIDI 和互動式 Piano Roll。你可以放慢 Piano Roll 的播放速度,檢查轉譜結果,不必手動輸入音符。樂譜會在我們開發的樂譜編輯器中開啟,你能先在瀏覽器裡編輯,再匯出。你也能用平常說話的方式告訴 AI 樂譜助理 Annie 想改什麼,請它替樂譜移調、改變調性,或加入歌詞和力度記號。Annie 會透過編輯器現有的操作來修改樂譜,每一處變更都會標示出來,也都能一步復原。

轉譜的準確度還是有差別。鋼琴獨奏、吉他獨奏或一條人聲旋律這類乾淨的錄音,結果會比多種樂器同時交疊的完整樂團混音準確得多。如果音軌裡的聲音很複雜,一次只轉一種樂器,轉出的單一聲部會最清楚;如果是樂團或合奏錄音,Songscription 的「多樂器」模式則能一次寫出所有聲部。自動轉譜很快就能完成大部分工作,接著你仍要檢查結果,在編輯器裡修正錯誤的地方,再從編輯器列印排版好的 PDF。如果你平常用 MuseScore,也能匯出 MusicXML,繼續在那裡編輯。

為什麼有些歌曲轉得準,有些卻比較難處理?AI 轉譜的準確度為什麼會有差異有更詳細的說明。想了解專門的 AI 工具在這方面能做到什麼、有哪些限制,請看 AI 能把歌曲轉成樂譜嗎。

拿到樂譜後,ChatGPT 還能幫什麼忙?

有了樂譜,就能用文字討論、分析音樂,ChatGPT 也能派上用場。看著手上的樂譜或和弦譜,你能請它:

  • 解釋不容易懂的和弦。 貼上和弦符號,問它包含哪些音、在這裡有什麼和聲功能,以及適合搭配什麼音階。
  • 提出指法建議。 描述段落和你用的樂器,請它建議合理的指法或手的位置,再實際試奏。
  • 安排練習計畫。 告訴它曲目、你的程度和能練多久,它會列出練習步驟。
  • 把你已經知道的旋律寫成 ABC。 如果你已經能描述或唱出曲調,把旋律用文字說明給它,它就能寫成文字記譜,再由你放進編輯器。

轉譜模型把聲音變成音符,ChatGPT 則在你拿到音符後,幫你理解和練習。搭配使用,就能先把錄音轉成樂譜,再請它協助你學會演奏。想知道 AI 能解釋一首曲子的哪些內容、又有哪些限制,請看 AI 能教你怎麼演奏一首歌嗎。

常見問題

ChatGPT 看得懂樂譜嗎?

如果是文字形式的記譜,就能讀。貼上 ABC 記譜、和弦譜,或用文字描述一段音樂,ChatGPT 就能討論內容,解釋其中的和聲與音樂變化。但它無法可靠地從印好的樂譜影像中讀出音符,所以不要指望它逐一讀對照片或 PDF 裡的音符。這時要用專門辨識印刷樂譜的工具;Songscription 能辨識樂譜照片或 PDF,轉成可編輯的樂譜。

ChatGPT 能寫樂譜嗎?

你用文字描述音階、一小段曲調,或已經知道的旋律,ChatGPT 就能用 ABC 這類文字記譜寫出簡單的單聲部旋律。它無法寫出排版完整、包含多個聲部且配置正確的樂譜,也無法從音訊檔案寫出樂譜。如果需要的不只是一段單聲部草稿,就要用樂譜編輯器或轉譜工具。

ChatGPT 能把 MP3 或音訊檔案轉成樂譜嗎?

不能。ChatGPT 無法可靠地把錄音轉成準確的樂譜。即使是接受音訊的聊天模型,訓練重點也是理解語音,而不是偵測音高、起音和節奏,再把音符寫到譜表上;它們還常常編出錄音裡沒有的音。要把 MP3 轉成樂譜,請使用專門處理這類訊號的 AI 轉譜工具。

要怎麼把歌曲轉成樂譜?

使用專門的 AI 轉譜工具,上傳音訊檔案或貼上連結,就能取得可編輯的樂譜、MIDI 和 Piano Roll。Songscription 會在內建的樂譜編輯器中產生樂譜,你可以在裡面修正錯誤的音符、移調、加入力度記號或歌詞,再列印 PDF。單一樂器或人聲的乾淨錄音,轉譜結果比聲音密集的完整樂團混音準確。

關於作者

Andrew Carlins

作者

Andrew Carlins

Songscription 共同創辦人兼執行長

Andrew 和幾位音樂人在史丹佛一起創辦了 Songscription,因為大家都受夠了想演奏一首歌,卻找不到樂譜的情況。他從小彈鋼琴、吹上低音薩克斯風,也演過音樂劇。雖然已經好幾年沒登台,他倒覺得自己還有兩下子。他的文章聊的是怎麼把錄音裡的歌寫成樂譜。

認識我們的團隊

閱讀更多相同主題的文章。