Music Source Separation with Band-Split RoPE Transformer
SDX23 music separation track - 2023
BS-RoFormerバンド分割スペクトログラムの特徴に加えRoPEトランスを使用しています。SDX23システムは音楽ソース分離トラックで1位を獲得し、小型バージョンではMUSDB18HQで平均9.80 dBの平均SDRを記録しました。
読み込み中...
入力
音楽音声または動画からボーカル、ドラム、ベース、ギター、ピアノ、その他を選択。
対応フォーマット
出力
対象ステムのみ、または対象を除去した残りのミックスを出力。
ユースケース
練習、伴奏、リミックス、サンプリング、部分的な清掃に最適です。
フィードバックにはツール名、操作手順、発生した問題を記載してください。スクリーンショットも確認に役立ちます。
カスタムステム抽出・除去は、1 回の実行で選択した 1 つの楽器を処理します。ボーカルは専用の Leap XE 90 + BS-RoFormer Leap Instrumental パスを通り、ドラム、ベース、ギター、ピアノ、その他は BS-RoFormer SW Fixed の six-stem 分離を使います。extract は選択したステムだけを返し、remove はそれを除いたミックスを返します。
ボーカル専用ルート: Leap XE 90 bands がボーカルを分離し、BS-RoFormer Leap Instrumental が伴奏の参照パスを担当します。
BS-RoFormer SW Fixedは、BS-Rofo-SW-Fixed.ckptとBS-Rofo-SW-Fixed.yamlを使ってフルミックスをsix WAV stemsに分割します。
SDX23 music separation track - 2023
BS-RoFormerバンド分割スペクトログラムの特徴に加えRoPEトランスを使用しています。SDX23システムは音楽ソース分離トラックで1位を獲得し、小型バージョンではMUSDB18HQで平均9.80 dBの平均SDRを記録しました。
ICASSP - 2023
HT DemucsはコアのDemucsレイヤーをcross-domain Transformer attentionに置き換え、追加データと微調整を加えて9.20 dBのSDRを報告します。
本サイトと外部のモデルの公開テスト結果を含みます。初期表示は出典の全項目表です。条件や指標を選んで比較することもできます。異なるテスト条件のスコアは直接比較できません。
公開された推論実装と対応する重みを確認できた記録、および重みを必要としないアルゴリズムのみを表示します。非公開サービス、未公開の重み、実験版との対応が未確認の記録は除外しています。全モデルの総合順位ではありません。
重みの公開だけでは完全なオープンソースライセンスは確認できません。データを展開すると、宣言された重みのライセンスとアクセス条件を確認できます。未記載のライセンスは別途表示します。
データセットを選ぶと各モデルの全指標を表示します。公式順位または選択した指標で並べ替えます。太字は同じ評価条件で比較できる各列の最良値で、同点も含みます。評価方法が異なる場合は別々に順位を付け、未報告のスコアは - で表示します。
このツールはBS-RoFormer SW Fixedをvocals、drums、bass、guitar、pianoなどに使っています。
| 指標別順位 | モデル | 評価条件 | ボーカルSDR (dB)↑ | ベース SDR (dB)↑ | ドラムSDR (dB)↑ | その他のSDR (dB)↑ |
|---|---|---|---|---|---|---|
| - | BS-RoFormer SW Fixed 6-stem当サイトで使用 このツールはBS-RoFormer SW Fixedをvocals、drums、bass、guitar、pianoなどに使っています。 公開の重み · 推論コード | MVSep entry 10770 | 11.2662 | 14.5526 | 14.0343 | 3.6897 |
印は当サイトで使用するモデルや構成モデルを示します。スコアと設定は引用元の公開評価に基づき、サイトの処理全体を再評価した結果ではありません。
スコアは記載のデータセット、指標、モデル版に対する結果です。異なるテストの数値は直接比較できません。
表には、公開ウェイトまたは設定があり、ローカルで実行できるモデルだけを掲載しています。
データセットを選ぶと各モデルの全指標を表示します。公式順位または選択した指標で並べ替えます。太字は同じ評価条件で比較できる各列の最良値で、同点も含みます。評価方法が異なる場合は別々に順位を付け、未報告のスコアは - で表示します。
このツールはBS-RoFormer SW Fixedをvocals、drums、bass、guitar、pianoなどに使っています。
| 指標別順位 | モデル | 評価条件 | ボーカルSDR (dB)↑ | ベース SDR (dB)↑ | ドラムSDR (dB)↑ | その他のSDR (dB)↑ |
|---|---|---|---|---|---|---|
| - | BS-RoFormer SW Fixed 6-stem このツールはBS-RoFormer SW Fixedをvocals、drums、bass、guitar、pianoなどに使っています。 公開の重み · 推論コード | MVSep entry 10770 | 11.2662 | 14.5526 | 14.0343 | 3.6897 |
素材に合う処理方法と操作手順を探せます。