カスタムステム抽出・除去 (RoFormer)とは何でしょうか?

対象ステムのみ、または対象を除去した残りのミックスを出力。; 練習、伴奏、リミックス、サンプリング、部分的な清掃に最適です。; 音楽音声または動画からボーカル、ドラム、ベース、ギター、ピアノ、その他を選択。

誰のためのカスタムステム抽出・除去 (RoFormer)?

分離とstem分割対象ステムのみ、または対象を除去した残りのミックスを出力。; 練習、伴奏、リミックス、サンプリング、部分的な清掃に最適です。; 音楽音声または動画からボーカル、ドラム、ベース、ギター、ピアノ、その他を選択。

カスタムステム抽出・除去 (RoFormer)どんな作業を手伝えるでしょうか?

分離とstem分割; 対象ステムのみ、または対象を除去した残りのミックスを出力。; 練習、伴奏、リミックス、サンプリング、部分的な清掃に最適です。; 音楽音声または動画からボーカル、ドラム、ベース、ギター、ピアノ、その他を選択。; 選択した楽器だけを抽出; 一つの対象を除去し残りを保持

分離とstem分割GPU作業量

カスタムステム抽出・除去

Q: 誰のためのカスタムステム抽出・除去 (RoFormer)?

分離とstem分割 対象ステムのみ、または対象を除去した残りのミックスを出力。; 練習、伴奏、リミックス、サンプリング、部分的な清掃に最適です。; 音楽音声または動画からボーカル、ドラム、ベース、ギター、ピアノ、その他を選択。

Q: どのモデルやキーワードのエンティティがカスタムステム抽出・除去 (RoFormer)と関連していますか?

BS-RoFormer SW Fixed 6-stem, MVSep BS Roformer SW, MVSep Multisong leaderboard, BS-Rofo-SW-Fixed HF weights, BS-Rofo-SW-Fixed mirror, BS-RoFormer implementation, bs-roformer-infer registry, python-audio-separator

練習、伴奏、リミックス、サンプリング、部分的な清掃に最適です。

対象ステムのみ、または対象を除去した残りのミックスを出力。

6クレジット/使用例ファイル入力マックス100 MB推定120〜900秒

入力

音楽音声または動画からボーカル、ドラム、ベース、ギター、ピアノ、その他を選択。

対応フォーマット

mp3wavflacoggm4aaacaifaiffmp4movmkv

出力

対象ステムのみ、または対象を除去した残りのミックスを出力。

ユースケース

練習、伴奏、リミックス、サンプリング、部分的な清掃に最適です。

モデル、パラメータ、ソース

シックスステムセパレーションは、vocals、drums、bass、guitar、piano、その他six WAV stemsに分かれます。

BS-RoFormer SW Fixed 6-stemMVSep BS Roformer SWMVSep Multisong leaderboardBS-Rofo-SW-Fixed HF weightsBS-Rofo-SW-Fixed mirrorBS-RoFormer implementationbs-roformer-infer registrypython-audio-separatorBS-RoFormerHT Demucsfacebookresearch/demucsHT Demucs paper

BS-RoFormer SW Fixed 6-stem

BS-RoFormer SW Fixedは、BS-Rofo-SW-Fixed.ckptとBS-Rofo-SW-Fixed.yamlを使ってフルミックスをsix WAV stemsに分割します。

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

音声出力:vocals、drums、bass、guitar、piano、other WAV stems。
アレンジのレビュー、練習素材、リミックス準備、ミックス曲を別々のstemファイルにするのに便利です。

モデル比較

モデル

役割

なぜ使われるのか

出力への影響

モデルBS-RoFormer SW Fixed 6-stem

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

役割BS-RoFormer SW 固定音声セパレーター six-stem

なぜ使われるのか選ばれたのは、出力BS-RoFormer SW Fixed 6-stem vocals、drums、bass、guitar、pianoなどがあり、公開MVSepとBS-RoFormer参照を持つためです。

出力への影響6 WAV stems

モデルHT Demucs

facebookresearch/demucs HT Demucs paper

役割分離基準/フォールバック

なぜ使われるのかHT Demucsは強力なオープンソースの参考文献です。このツールはBS-RoFormer SW Fixed 6-stemを使います。なぜなら、表示された6つのstemsを直接ターゲットにしているからです。

出力への影響コンテキストやフォールバックstems

ベンチマークチャート:MVSep BS-RoFormer SW 固定six-stemデータ / MVSep piano stem検証行 / MVSep guitar stem検証行

オープンソースでローカル導入可能な範囲：ダウンロード可能な重みまたは設定とローカル導入手順を確認できた行だけを掲載しています。SOTA と「最良」は表示中の確認済み行の中での評価であり、ホスト型、API 専用、商用のシステムを含まず、全モデル共通の総合順位ではありません。

MVSep BS-RoFormer SW 固定six-stemデータ

MVSep Multisong entry 8374

これにより、展開可能なBS-RoFormer SW Fixed 6-stem列はパブリックhtdemucs_6sの基準線の隣に位置します。近隣のTest、RA、Logic、UVRの行は、ツールモデルではなくバリアントやテストランです。

論文およびベンチマークノート	モデル	ボーカルSDR (dB)	詳細指標
MVSep entry 8374	BS-RoFormer SW Fixed 6-stemTelkNetMVSep entry 8374 このツールはBS-RoFormer SW Fixedをvocals、drums、bass、guitar、pianoなどに使っています。	11.3019	インストゥルメンタルSDR (dB)17.5091ベース SDR (dB)14.6235ドラムSDR (dB)14.1129ギター SDR (dB)9.0500ピアノ SDR (dB)7.8300その他のSDR (dB)8.7169

MVSep piano stem検証行

MVSep Piano scores

MVSepはsix-stem対応セパレータ用の別々のpiano stem検証行を公開しています。これらの行が、現在のBS-RoFormer SW固定モデルがpiano出力に使われる理由を説明しています。

階級	モデル	ピアノ SDR (dB)	詳細指標
MVSep entry 9578	BS-RoFormer SW FixedTelkNetMVSep entry 9578	7.8031SOTA	その他のSDR (dB)19.5824最良
MVSep entry 7396	Ensemble (SCNet + Mel)MVSep entry 7396	6.2054	その他のSDR (dB)18.4851
MVSep entry 7395	SCNet Large (2024.09)MVSep entry 7395	5.8912	その他のSDR (dB)18.1698
MVSep entry 7394	MelRoformer (viperx)MVSep entry 7394	5.7118	その他のSDR (dB)17.9917
MVSep entry 7392	mdx23c (2024.09)MVSep entry 7392	5.5996	その他のSDR (dB)17.8796
MVSep entry 7390	mdx23c (2023.08)MVSep entry 7390	4.7969	その他のSDR (dB)17.0766

MVSep guitar stem検証行

MVSep Guitar scores

MVSepはsix-stem対応セパレータに対して別々のguitar stem検証行を公開しています。これらの行は、単一のsix-stemリーダーボードには存在しない展開可能なモデルコンテキストを提供します。

階級	モデル	ギター SDR (dB)	詳細指標
MVSep entry 9245	BS-RoFormer SW FixedTelkNetMVSep entry 9245	9.0120SOTA	その他のSDR (dB)15.9828最良
MVSep entry 7149	Ensemble (BSRoformer + MelRoformer)MVSep entry 7149	7.5112	その他のSDR (dB)14.4820
MVSep entry 6741	Ensemble (mdx23 + MelRoformer)MVSep entry 6741	7.1835	その他のSDR (dB)14.1542
MVSep entry 6776	BSRoformer (viperx)MVSep entry 6776	7.1266	その他のSDR (dB)13.9775
MVSep entry 6720	MelRoformer (2024.06)MVSep entry 6720	7.0211	その他のSDR (dB)13.9919
MVSep entry 6740	mdx23c (2024.06)MVSep entry 6740	6.3422	その他のSDR (dB)13.3130

論文およびベンチマークノート

Music Source Separation with Band-Split RoPE Transformer

SDX23 music separation track - 2023

BS-RoFormerバンド分割スペクトログラムの特徴に加えRoPEトランスを使用しています。SDX23システムは音楽ソース分離トラックで1位を獲得し、小型バージョンではMUSDB18HQで平均9.80 dBの平均SDRを記録しました。

arXiv:2309.02612

Hybrid Transformers for Music Source Separation

ICASSP - 2023

HT DemucsはコアのDemucsレイヤーをcross-domain Transformer attentionに置き換え、追加データと微調整を加えて9.20 dBのSDRを報告します。

arXiv:2211.08553

公式・リポジトリ

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator

論文/技術ノート

BS-RoFormer

パラメータガイド

モデル:BS-RoFormer SW Fixed 6-stem(BS-Rofo-SW-Fixed.ckpt)。
音声出力:vocals、drums、bass、guitar、piano、other WAV stems。
モデルオプション:パブリックMVSepアルゴリズム参照ではこのエントリがsep_type=63として記載されています。TelkNetはローカルBS-RoFormer SWの重みを扱い、外部MVSep APIジョブではありません。add_optコントロールがないため、ツールは公式のデフォルトの品質設定を使用しています。

ユースケース

選択した楽器だけを抽出
一つの対象を除去し残りを保持
練習・伴奏・リミックス・サンプリング素材を作成

ワークフロー

1音楽をアップロードし対象ステムを選択
2抽出または除去を選択。ボーカルは専用経路、その他は6ステム経路を使用
3結果を試聴・ダウンロード、または元動画へ再多重化

事前チェックリスト

ボーカル対象では専用ボーカル経路を使用
密に重なる楽器では漏れが残る場合があります
大量処理前に代表的なクリップで確認

このランのモデル証拠

モデル、パラメータ、ソース

シックスステムセパレーションは、vocals、drums、bass、guitar、piano、その他six WAV stemsに分かれます。

BS-RoFormer SW Fixed 6-stem

モデル

BS-Rofo-SW-Fixed.ckpt + YAML

BS-RoFormer SW Fixedは、BS-Rofo-SW-Fixed.ckptとBS-Rofo-SW-Fixed.yamlを使ってフルミックスをsix WAV stemsに分割します。

音声出力:vocals、drums、bass、guitar、piano、other WAV stems。
アレンジのレビュー、練習素材、リミックス準備、ミックス曲を別々のstemファイルにするのに便利です。

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

モデル比較

BS-RoFormer SW Fixed 6-stem

BS-RoFormer SW 固定音声セパレーター six-stem

選ばれたのは、出力BS-RoFormer SW Fixed 6-stem vocals、drums、bass、guitar、pianoなどがあり、公開MVSepとBS-RoFormer参照を持つためです。

6 WAV stems

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

HT Demucs

分離基準/フォールバック

HT Demucsは強力なオープンソースの参考文献です。このツールはBS-RoFormer SW Fixed 6-stemを使います。なぜなら、表示された6つのstemsを直接ターゲットにしているからです。

コンテキストやフォールバックstems

facebookresearch/demucs HT Demucs paper

パラメータガイド

モデル:BS-RoFormer SW Fixed 6-stem(BS-Rofo-SW-Fixed.ckpt)。
音声出力:vocals、drums、bass、guitar、piano、other WAV stems。
モデルオプション:パブリックMVSepアルゴリズム参照ではこのエントリがsep_type=63として記載されています。TelkNetはローカルBS-RoFormer SWの重みを扱い、外部MVSep APIジョブではありません。add_optコントロールがないため、ツールは公式のデフォルトの品質設定を使用しています。

論文/技術ノート

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

入力

TelkNet QA — batch-a

デモ

2オーディオトラック

TelkNet QA — batch-a

対象ステムのみ、または対象を除去した残りのミックスを出力。

0:00 / 0:30

ギター

0.0 dB

0.00s

vocals

0.0 dB

0.00s

0:000:050:100:150:200:250:30

メンテナンス中

このツールはメンテナンス中です。後でもう一度お試しください。

ワンクリックフィードバック

ご提案やご要望をこちらに入力して送信してください。すべての声を真摯に受け止め、良いアイデアを実際の機能として実現できるよう努めています。

カスタムステム抽出・除去 (RoFormer) · TelkNet