ピアノオーディオをMIDIや楽譜に変換する

生のオーディオからデジタルデータへ

誰もが経験したことがあるでしょう。ピアノに向かい、スマートフォンの録音ボタンを押して、とても気に入った即興演奏をする。あるいは、YouTubeで素晴らしいピアノカバーを見つけたものの、クリエイターが楽譜をリンクしていない場合などです。

オーディオファイルからノートを読み取って紙やDAWに落とし込むには、かつては何時間もの面倒なリスニング、一時停止、推測、そして書き起こしが必要でした。この煩わしさこそが、私たちがIvoryを作った理由です。今日では、AIがピアノのトラックを聴き、数分で使用可能なデジタルフォーマットに変換することができます。しかし、これらのツールを最大限に活用するには、自分がどのようなフォーマットを扱っているかを正確に理解することが役立ちます。

MIDIとは正確には何ですか？

デジタル音楽制作が初めての場合、MIDI（Musical Instrument Digital Interface）は実際にはオーディオではないため、少し混乱するかもしれません。昔の自動演奏ピアノのロール紙のようなものと考えてください。楽器の音を録音するのではなく、アクションを記録します。

IvoryがあなたのMP3やYouTubeリンクをMIDIに変換するとき、パフォーマンスに関する生データを抽出しています：

ピッチ（Pitch）：正確にどの鍵盤が押されたか。
ベロシティ（Velocity）：どれくらい強く鍵盤を叩いたか（表現力豊かなダイナミクスをキャプチャします）。
タイミング（Timing）：ノートが開始・終了する正確なミリ秒。

ただのデータであるため、MIDIは完全に柔軟です。MIDIファイルをLogic Pro、Ableton、FL Studioなどのソフトウェアにドラッグ＆ドロップして、間違ったノートを修正したり、オーディオを歪めることなくテンポを変更したり、さらにはピアノの演奏をシンセサイザーやストリングスの音色に割り当てることもできます。

理にかなうものにする：楽譜

MIDIはコンピュータにとっては素晴らしいものですが、生のデータは人間が初見で読むには信じられないほど困難です。そこで伝統的な楽譜の出番です。

オーディオを読みやすいスコアに変換することは、生のノートを単にキャプチャするよりも実際にはるかに難しい問題です。ソフトウェアは音楽の文脈を理解しなければなりません。拍子記号を計算し、どのノートが左手と右手に属するかを判別し、背後にあるコードを検出し、そして決定的に重要なこととしてリズムをクオンタイズしなければなりません。クオンタイズしなければ、人間のわずかな遅れが64分音符の読めない混乱として現れるでしょう。

Ivoryはこの面倒な作業を自動的に処理し、タブレットから直接読むことができるクリーンで読みやすいスコアにオーディオを構造化したり、PDFやMusicXML（SibeliusやMuseScoreなどの記譜ソフトウェアの標準フォーマット）としてエクスポートしたりすることができます。

実際のトランスクリプションのワークフロー

私たちはIvoryを、ワンクリックのコンバーターとしてではなく、ワークスペースとして設計しました。ここでは、曲を分析し、学習するための使用方法を紹介します：

1. オーディオを用意する完璧なスタジオ録音は必要ありません。MP3、WAV、またはMP4ファイル（最大15MB）をドラッグ＆ドロップします。パフォーマンスがオンラインにある場合は、YouTubeのURLをアプリに直接貼り付けて、エンジンに作業を任せるだけです。
2. 確認と練習処理が完了すると、Ivoryはインタラクティブなウェブプレーヤーを開きます。ただ静的なファイルを見つめているだけではありません。ピアノロールに落ちてくるノートを見たり、速いパッセージを解明するためにテンポを大幅に落としたり、指が覚えるまで特定のセクションをループさせたりすることができます。ワンクリックで曲全体を別のキーに移調することも可能です。
3. 詳細の微調整 AIによるトランスクリプションは非常に強力ですが、それでも編集上の選択を行いたい場合があるでしょう。私たちは、おなじみのピアノロールエディタをブラウザに直接組み込みました。ノートが少しずれていると感じたり、長さを変更したい場合は、ノートを即座にドラッグ、ドロップ、サイズ変更、または削除することができます。
4. ワークフローへのエクスポート必要な正確なフォーマットを取得します。MIDIをDAWに引き込んだり（専用のDAWプラグインも間もなく登場します）、アレンジのためにMusicXMLを取得したり、あるいは単に譜面台用のPDFをダウンロードしたりできます。

良いアイデアを消えさせない

不可能なコード進行を学ぼうとしている場合でも、カバー曲をアレンジしている場合でも、単に真夜中の即興演奏をアーカイブしようとしている場合でも、音符を書き留めることが障害になるべきではありません。オーディオファイルやYouTubeリンクをIvoryにドロップして、何がキャプチャされるかを見てみましょう。