主な特徴
使える場面
- 人気曲を制作向けにピアノ版へ変換する
- ピアノの生徒向けに練習曲を作る
- 好きな曲のカバーを作って共有する
使い方
- 1 AMT-APCのGitHubリポジトリを開く
- 2 PythonやTensorFlowなど、必要な環境をインストールする
- 3 データセットをダウンロードして準備する
- 4 学習スクリプトを実行する
- 5 学習済みモデルでピアノカバーを生成する
こんな方におすすめ
メリット
- 無料で使える
- オープンソースのコードに論文とデモが付く
- ピアノカバー作りを自動化できる
制限事項
- 研究プロジェクトなので、環境構築と学習には技術的なスキルが必要
- 結果はデータセットと学習の状態に左右される
- オープンソースの研究プロジェクトは変更されたり、更新が止まったりすることがある
AMT-APC とは
AMT-APCは、自動音楽転写モデルを微調整することでピアノカバーを自動的に作る手法です。土台にはSonyのhFT-Transformerを採用し、YouTubeから収集したピアノカバーのデータセットで学習させます。GitHubにはオープンソースのコードが公開され、研究論文とデモ動画も用意されているため、出力例を見てから自分で再現できます。無料で使えるプロジェクトで、曲をわざわざ手で弾かずにピアノ版へ移したい音楽プロデューサー、ピアノ講師、愛好家を想定しています。ボタンを押すだけの完成品ではなく、自分で環境を組み立てて試す種類の道具です。
できること
- 既存の曲からピアノカバーを生成する
- 必要なら自分のデータでモデルを微調整する
- GitHubのオープンソースコードを利用する
- 論文を読み、デモ動画で出力例を確認する
こんな人に向いています
- トラックのピアノ版を必要とする音楽プロデューサー
- 生徒向けの練習教材を作るピアノ講師
- 好きな曲のカバーを趣味で作る愛好家
- 音楽転写を研究中の研究者
注意点
これは研究プロジェクトなので、設定や学習には相応の技術力が要ります。環境をインストールし、データセットを準備し、学習スクリプトを走らせる作業であり、ボタン一つで終わるわけではありません。出来ばえは使うデータセットと学習の進め方に左右され、曲によって品質に差が出ます。オープンソースの研究は内容が変わったり、保守が止まったりすることがあるため、使う版を固定し、継続的なサポートを期待しないでください。生成されたカバーは仕上がりの出発点として扱い、そのまま演奏や配布に使う前に聞き直してください。処理速度はファイル容量と通信環境に影響されるので、混雑時に止まったら後で再試行してください。まず一連の流れを最後まで一度通し、手順と結果に慣れてから範囲を広げるのが安心です。
よくある質問
AMT-APCとは何ですか?
自動音楽転写モデルを微調整してピアノカバーを生成する手法です。
無料ですか?
はい。モデルは無料で利用できます。
実行には何が必要ですか?
GitHubの手順に従い、PythonやTensorFlowなどの環境を整え、データセットを準備します。
無料で使える理由
公式ページの記載内容: 無料で
無料の上限、トライアル期間、機能は公式サイトが決定し、いつでも変更される場合があります。
製品プレビュー
一覧ページから保存したスクリーンショットです。プレビュー専用です。