好きな曲を聴いて弾きたくなっても、ちょうどいい楽譜が見つからないことがあります。演奏を始めたばかりの人も、長く続けている人も、日々こうした壁にぶつかっています。
数百人の音楽家に話を聞く中で、この問題の大きさが見えてきました。曲を正確で読みやすい楽譜にするには、複雑な作業に多くの時間がかかります。その作業で、創作の流れが途切れることも少なくありません。作曲者やプロデューサーは、ジャムセッションで耳にした即興のフレーズが気に入っても、音を正確に覚えていないために再現できずにいます。音楽を学ぶ人が弾きたい曲のうち、楽譜が見つからない曲は最大60%にのぼります。教える人も、生徒のために毎週何時間も楽譜を探し、自分で耳コピして楽譜を書くことがよくあります。
楽譜にもShazamのようなものがあったら
Songscriptionは、そんな経験から生まれました。私たちが出会ったのは学生時代です。みんな音楽が好きで、技術にも夢中でした。自分たちも演奏する中でこの問題を感じていたからこそ、AIを使って、誰もがもっと気軽に音楽を作り、弾き、楽しく学べるようにしたいと考えました。
私たちの技術
音声ファイルを、内容が分かりやすく編集もしやすいMIDIや楽譜に変換すること。これは、音楽情報検索の分野で数十年にわたって取り組まれてきた課題です。私たちは独自のTransformerベースのモデルで、この課題の解決に取り組んでいます。系列学習と音楽AIの先端研究を組み合わせ、プロのアーティストから得た質の高いデータで学習させています。タイや装飾音(トリル、モルデントなど)の細かな違いも捉えられます。その理解が、業界トップクラスの採譜精度につながっています。
曲をアップロードすると、ピアノ、バイオリン、フルート、ギターの楽譜を作れます。対応する楽器は、近く追加する予定です。作った楽譜はダウンロードでき、Songscription内で直接編集することもできます。五線譜を読まない人にも演奏を学んでもらえるよう、ピアノロール機能も加えました。
利用の広がりと成果
現在、Songscriptionは150か国の3,000人以上に使われ、これまでに20,000件を超える楽譜を作成しています。利用者数は**毎月60%**ずつ増えています。音声をMIDIに変換するモデルについても、音楽会社と初めての契約を結びました。その会社からは、他のどのモデルよりも優れていると評価されています。
これからの開発予定
今後もAIモデルを改良し、対応する楽器を増やしていきます。音源をパートごとに分けるステム分離や、複数トラックのアップロードに対応する予定です。編曲や難易度調整などの新機能も開発していきます。
追記:現在は、ここに挙げた機能の多くを公開しています。編曲、難易度調整のほか、1回の採譜で音源から聴き取った楽器ごとにパートを分けて書き起こすMulti-Instrumentも使えます。詳しくは複数の楽器をまとめて採譜するガイドをご覧ください。
私たちが目指すこと
世界中で音楽を楽しむ人が、好きな曲を学び、弾けるようにする。それが私たちの目標です。曲を作る人が音符を書き留める作業にかける時間を減らし、音楽を作って誰かと分かち合う時間を増やせるようにしたいと考えています。教える人には、生徒やアンサンブルに合わせて編曲した楽譜を使ってほしいと思っています。楽器を弾ける何百万人もの人が、自分のレベルに合った教材を使い、もっと頻繁に楽器を手にして練習するきっかけを作れたらと思います。
音楽は、人間らしさを形作る大切なものです。私たちはSongscriptionで、演奏の妨げになっていることを、一緒に音を出して楽しむきっかけに変えたいと考えています。これからの音楽づくりや学び方について、同じ思いがあれば、お話を聞かせてください。
感謝と、これからへの期待を込めて。
Songscriptionチーム