Enhanced Automatic Drum Transcription via Drum Stem Source Separation
arXiv - 2025
読み込み中...
ADTOF Plus · ADTOF Direct · ADT_STR · MSG-LD. フルミックスは選択した処理手順で先にドラムを分離します。ドラムのみの音源は選択した採譜・分離モデルへ直接渡します。
入力
mp3 / wav / flac / ogg / m4a / aac / aif / aiff / mp4 / mov / mkvなどのフォーマットでの入力をサポートしています。
対応フォーマット
出力
MIDI
ユースケース
音符、楽器編成、演奏の細部を編集します。
素材と用途に合ったモデルを選び、例を確認してから送信してください。
料金、時間、形式、パラメータは選択したモデルによって異なります。
フィードバックにはツール名、操作手順、発生した問題を記載してください。スクリーンショットも確認に役立ちます。
ADT_STR は 26 種類のドラムの発音時刻とベロシティを検出し、MIDI を出力します。
MSG-LD は 5 種類のドラム音声と発音時刻を生成します。MIDI のベロシティは 100、再生長は 0.1 秒固定です。
MSG-LD は 5 種類のドラム音声と発音時刻を生成します。MIDI のベロシティは 100、再生長は 0.1 秒固定です。
ADTOF Plus は ADTOF の採譜にドラム分離、ベロシティ変換、オープン/クローズドハイハット処理を加え、フルミックスを入力できます。
ADTOF Direct は PyTorch 版 ADTOF で独立したドラム音源を採譜します。フルミックスを選ぶと TelkNet が先に AudioSep-Hive でドラムを抽出し、Plus のベロシティや開閉ハイハットの後処理は行いません。
arXiv - 2025
ISMIR - 2021
Signals - 2023
本サイトと外部のモデルの公開テスト結果を含みます。初期表示は出典の全項目表です。条件や指標を選んで比較することもできます。異なるテスト条件のスコアは直接比較できません。
公開された推論実装と対応する重みを確認できた記録、および重みを必要としないアルゴリズムのみを表示します。非公開サービス、未公開の重み、実験版との対応が未確認の記録は除外しています。全モデルの総合順位ではありません。
重みの公開だけでは完全なオープンソースライセンスは確認できません。データを展開すると、宣言された重みのライセンスとアクセス条件を確認できます。未記載のライセンスは別途表示します。
データセットを選ぶと各モデルの全指標を表示します。公式順位または選択した指標で並べ替えます。太字は同じ評価条件で比較できる各列の最良値で、同点も含みます。評価方法が異なる場合は別々に順位を付け、未報告のスコアは - で表示します。
ADT-STR の README の推奨と成績図に相違があります。順位は公式図に記載された数値に基づきます。
| 指標別順位 | モデル | ENST↑F1 (%) | MDB↑F1 (%) |
|---|---|---|---|
| 1 | ADT-STR · τ=0.4当サイトで使用 | 60 | 71 |
| 2 | ADT-STR · τ=0.6 | 58 | 65 |
| 3 | ADT-STR · τ=0.8 | 52 | 61 |
印は当サイトで使用するモデルや構成モデルを示します。スコアと設定は引用元の公開評価に基づき、サイトの処理全体を再評価した結果ではありません。
データセット・バージョン・条件を分け、掲載可能な行がない評価も出典を残します。
展開可能 2 / 原表 2
展開可能 6 / 原表 6
展開可能 3 / 原表 6
これらの実験に対応する完全な公開推論パッケージは未確認です。同名モデルの別の重みでは代用できません。
Vogl et al. 8-class baseline · MDB · 8-class evaluation · onset only · 50 ms · Vogl et al. 8-class baseline · RBMA · 8-class evaluation · onset only · 50 ms · Vogl et al. 8-class baseline · ENST · 8-class evaluation · onset only · 50 ms
展開可能 0 / 原表 8
これらの実験に対応する完全な公開推論パッケージは未確認です。同名モデルの別の重みでは代用できません。
Setting-1 · ENST · Setting-2 · ENST · Setting-3 · ENST · Setting-4 · ENST · Setting-1 · MDB · Setting-2 · MDB · Setting-3 · MDB · Setting-4 · MDB
展開可能 2 / 原表 3
これらの実験に対応する完全な公開推論パッケージは未確認です。同名モデルの別の重みでは代用できません。
LarsNet
展開可能 2 / 原表 4
これらの実験に対応する完全な公開推論パッケージは未確認です。同名モデルの別の重みでは代用できません。
MSG-LD Vanilla · MSG-LD TB
スコアは記載のデータセット、指標、モデル版に対する結果です。異なるテストの数値は直接比較できません。
表には、公開ウェイトまたは設定があり、ローカルで実行できるモデルだけを掲載しています。
データセットを選ぶと各モデルの全指標を表示します。公式順位または選択した指標で並べ替えます。太字は同じ評価条件で比較できる各列の最良値で、同点も含みます。評価方法が異なる場合は別々に順位を付け、未報告のスコアは - で表示します。
展開可能 2 / 原表 2
ADTOF-PyTorch README · PyTorch 88.51 · Keras 88.74
| 指標別順位 | モデル | Recall↑ | Precision↑ | F-measure↑ |
|---|---|---|---|---|
| 1 | ADTOF (original) | 88.68 | 89.90 | 88.74 |
| 2 | ADTOF-pytorch公開の重み · 推論コード | 88.26 | 89.83 | 88.51 |
データセットを選ぶと各モデルの全指標を表示します。公式順位または選択した指標で並べ替えます。太字は同じ評価条件で比較できる各列の最良値で、同点も含みます。評価方法が異なる場合は別々に順位を付け、未報告のスコアは - で表示します。
数値はリンク先の公開資料に基づきます。行ラベルはテストセットやチェックポイントを示し、未報告のスコアは - で表示します。
| 指標別順位 | モデル | 評価条件 | F1 (%)↑ | 適合率 (%)↑ | 再現率 (%)↑ |
|---|---|---|---|---|---|
| 1 | ADTOF Plus公開の重み · 推論コードMDX23C 5-stemMDX23C full-mix drumsADTOF PyTorch推論コード drumsep_5stems_mdx23c_jarredou.ckpt重みのライセンス(リポジトリの記載):mit | MDB · 5 classes · onset only · 50 ms | 89 | 89 | 89 |
| 2 | Original ADTOF | MDB · 5 classes · onset only · 50 ms | 87 | - | - |
データセットを選ぶと各モデルの全指標を表示します。公式順位または選択した指標で並べ替えます。太字は同じ評価条件で比較できる各列の最良値で、同点も含みます。評価方法が異なる場合は別々に順位を付け、未報告のスコアは - で表示します。
数値はリンク先の公開資料に基づきます。行ラベルはテストセットやチェックポイントを示し、未報告のスコアは - で表示します。
| 指標別順位 | モデル | 評価条件 | F1 (%)↑ | 適合率 (%)↑ | 再現率 (%)↑ |
|---|---|---|---|---|---|
| - | ADTOF Plus公開の重み · 推論コードMDX23C 5-stemMDX23C full-mix drumsADTOF PyTorch推論コード drumsep_5stems_mdx23c_jarredou.ckpt重みのライセンス(リポジトリの記載):mit | MDB · 8-class evaluation · onset only · 50 ms | 84 | 84 | 84 |
データセットを選ぶと各モデルの全指標を表示します。公式順位または選択した指標で並べ替えます。太字は同じ評価条件で比較できる各列の最良値で、同点も含みます。評価方法が異なる場合は別々に順位を付け、未報告のスコアは - で表示します。
展開可能 2 / 原表 3
これらの実験に対応する完全な公開推論パッケージは未確認です。同名モデルの別の重みでは代用できません。
LarsNet
論文は OB、TB、OBTB を別々に評価しています。OB の点数を既定の OBTB に適用することはできません。音符 F1 と音声 mel-MSE/FAD は別表です。論文の検出処理は当サイトで再測定していません。
| 指標別順位 | モデル | MDB · Kick | MDB · Snare | MDB · Toms | MDB · Hi-Hats | MDB · Cymbals | MDB · Overall | ENST · Kick | ENST · Snare | ENST · Toms | ENST · Hi-Hats | ENST · Cymbals | ENST · Overall | ||||||||||||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | ||
| 1 | ADTOF | 0.851 | 0.790 | 0.923 | 0.752 | 0.828 | 0.690 | 0.520 | 0.520 | 0.520 | 0.773 | 0.859 | 0.703 | 0.849 | 0.802 | 0.902 | 0.795 | 0.813 | 0.778 | 0.795 | 0.984 | 0.667 | 0.599 | 0.932 | 0.441 | 0.581 | 0.669 | 0.513 | 0.777 | 0.936 | 0.663 | 0.657 | 0.788 | 0.563 | 0.709 | 0.908 | 0.582 |
| 2 | MSG-LD OB公開の重み · 推論コード | 0.931 | 0.939 | 0.923 | 0.760 | 0.791 | 0.732 | 0.268 | 0.309 | 0.236 | 0.650 | 0.550 | 0.794 | 0.481 | 0.663 | 0.377 | 0.707 | 0.709 | 0.704 | 0.821 | 0.941 | 0.729 | 0.642 | 0.698 | 0.594 | 0.491 | 0.415 | 0.602 | 0.630 | 0.643 | 0.618 | 0.391 | 0.611 | 0.287 | 0.640 | 0.695 | 0.593 |
データセットを選ぶと各モデルの全指標を表示します。公式順位または選択した指標で並べ替えます。太字は同じ評価条件で比較できる各列の最良値で、同点も含みます。評価方法が異なる場合は別々に順位を付け、未報告のスコアは - で表示します。
展開可能 2 / 原表 4
これらの実験に対応する完全な公開推論パッケージは未確認です。同名モデルの別の重みでは代用できません。
MSG-LD Vanilla · MSG-LD TB
論文は OB、TB、OBTB を別々に評価しています。OB の点数を既定の OBTB に適用することはできません。音符 F1 と音声 mel-MSE/FAD は別表です。論文の検出処理は当サイトで再測定していません。
| 指標別順位 | モデル | MDB Overall | ENST Overall | Mean overall F1 (2 sets) | ||||||
|---|---|---|---|---|---|---|---|---|---|---|
| F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | ||
| 1 | MSG-LD OB公開の重み · 推論コード | 0.707 | 0.709 | 0.704 | 0.640 | 0.695 | 0.593 | 0.674 | 0.674 | 0.674 |
| 2 | MSG-LD OBTB公開の重み · 推論コード | 0.690 | 0.709 | 0.672 | 0.636 | 0.703 | 0.580 | 0.663 | 0.663 | 0.663 |