任意のオーディオソースをMIDIに変換できる最先端のオーディオプラグイン DamRsn「NeuralNote」がリリース&無料配布中!!
NeuralNoteは、最先端のオーディオからMIDIへの変換機能を、お気に入りのデジタルオーディオワークステーションにもたらすオーディオプラグインです。
🎉 NeuralNote v2.0.0 がリリースされました!リリースぺージからダウンロードしてください。
これまでのテストは、ごく一部のマシンとGPUのみを対象としています。お使いのハードウェアで不具合が発生した場合、または正常に動作した場合は、GitHubのイシュー(ハードウェアのセクションを参照)でお知らせください。
v2の新機能
より高性能な新しい文字起こしモデル。v2では、SpotifyのBasic Pitchが KyutaiとMireloによるMuScriptorに置き換えられました(論文、ブログ記事、 チェックポイント)。Basic Pitchの17,000未満のパラメータ数に対し、MuScriptorは1億300万から14億のパラメータ数を持つトランスフォーマーです。
複数楽器の楽譜作成。楽器ごとに音符をグループ化し、一度に1つの楽器だけでなく、ミックス全体をノート化します。
マルチインストゥルメントシンセサイザーを内蔵。各楽器のゲイン調整、ミュート、ソロ再生機能を備え、採譜されたすべての楽器の音を聴くことができます。
新しくモダンなユーザーインターフェース。
完全にローカルで処理されます。文字起こしはGPUまたはCPU上で実行され、音声データが外部に送信されることはありません。NeuralNoteは、モデルのダウンロードとアップデートの確認時のみオンラインに接続します。
してください( 「モデルとパフォーマンス」を参照)。
使用法
NeuralNoteは、文字起こししたいトラックに適用するシンプルなAudioFXプラグイン(VST®3/AU/スタンドアロンアプリ)です。
音声を集める:
録音ボタンをクリックしてください。これは、ライブ録音時とDAWでトラックを再生時の両方で機能します。
または、プラグインにオーディオファイルをドロップしてください(.wav、.aiff、.flac、.mp3、.ogg(vorbis)がサポートされています)。
左側のパネルで、楽譜を作成する楽器を選択するか、Automaticモデルに自動検出させるかを選択してください。
モデルに適切な楽器セットを与えると、文字起こしの精度が向上する傾向がある。
クリックしてくださいTranscribe。バックグラウンドで楽譜の書き起こしが実行され、MIDIデータがデコードされるにつれてピアノロールに反映されます。実行中は進行状況インジケーターとキャンセルボタンが表示されます。
再生ボタンをクリックすると、文字起こしが完了するのを待たずに結果を聞くことができます。現時点で解読された部分のみが再生されます。
元の音声と合成された文字起こしの比率を調整してください。
各楽器の音量を調整してください。
結果に満足したら、プラグインからMIDIファイルをMIDIトラックにドラッグ&ドロップするか、MIDIファイルをコンピューターに保存してください。
NeuralNote は、最先端のオーディオから MIDI への変換をお気に入りのデジタル オーディオ ワークステーションにもたらすオーディオ プラグインです。
あらゆる音楽器に対応 (音声を含む)
ポリフォニック転写をサポート
ピッチベンドをサポート
軽量で非常に高速な転写
プラグインで直接、転写された MIDI をスケールおよびタイムクオンタイズできる
NeuralNote をインストールする
ここからお使いのプラットフォームの最新リリースをダウンロードしてください(Windows および macOS (ユニバーサル) をサポート)!
追記:一部の環境でセキュリティソフトの検出が見られるようです。筆者が確認した限りでは問題ないようでしたが、気になる方は念のため確認してから使用する方が良いかもしれません。
NeuralNote.png)
