Co to jest Niestandardowe wydzielanie/usuwanie stemu?

Jeden docelowy stem albo miks bez wybranego źródła.; Niestandardowe wydzielanie/usuwanie stemu

Dla kogo Niestandardowe wydzielanie/usuwanie stemu?

Separacja i stem rozłam Jeden docelowy stem albo miks bez wybranego źródła.; Niestandardowe wydzielanie/usuwanie stemu

W jakich zadaniach może Niestandardowe wydzielanie/usuwanie stemu pomóc?

Separacja i stem rozłam; Jeden docelowy stem albo miks bez wybranego źródła.; Niestandardowe wydzielanie/usuwanie stemu; Wybierz wokal, perkusję, bas, gitarę, fortepian lub inne w audio albo wideo muzycznym.; Usuń; Dialog

Niestandardowe wydzielanie/usuwanie stemu · TelkNet

Separacja i stem rozłamGPU obciążenia pracą

Niestandardowe wydzielanie/usuwanie stemu

Q: Które modele i jednostki słów kluczowych są powiązane z Niestandardowe wydzielanie/usuwanie stemu?

BS-RoFormer SW Fixed 6-stem, MVSep BS Roformer SW, MVSep Multisong leaderboard, BS-Rofo-SW-Fixed HF weights, BS-Rofo-SW-Fixed mirror, BS-RoFormer implementation, bs-roformer-infer registry, python-audio-separator

Jeden docelowy stem albo miks bez wybranego źródła.

6 kredyty/wykorzystanieWejście plikuMax 100 MBSzacowany czas 120-900 sekund

Wejście

Wybierz wokal, perkusję, bas, gitarę, fortepian lub inne w audio albo wideo muzycznym.

Obsługiwane formaty

mp3wavflacoggm4aaacaifaiffmp4movmkv

Produkcja

Jeden docelowy stem albo miks bez wybranego źródła.

Przypadek użycia

Niestandardowe wydzielanie/usuwanie stemu

Modele, parametry i źródła

Six-Stem Separation dzieli mieszankę na six WAV stems: vocals, drums, bass, guitar, piano i inne.

BS-RoFormer SW Fixed 6-stemMVSep BS Roformer SWMVSep Multisong leaderboardBS-Rofo-SW-Fixed HF weightsBS-Rofo-SW-Fixed mirrorBS-RoFormer implementationbs-roformer-infer registrypython-audio-separatorBS-RoFormerHT Demucsfacebookresearch/demucsHT Demucs paper

BS-RoFormer SW Fixed 6-stem

BS-RoFormer SW Fixed używa BS-Rofo-SW-Fixed.ckpt plus BS-Rofo-SW-Fixed.yaml do podzielenia pełnego miksu na six WAV stems.

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

Wyjście audio: vocals, drums, bass, guitar, piano i other WAV stems.
Przydatne do przeglądu aranżacji, materiałów do ćwiczeń, przygotowania do remiksu oraz przekształcania miksowanych utworów w osobne pliki stem.

Porównanie modeli

Model

Rola

Dlaczego jest używany

Wpływ na produkcję

ModelBS-RoFormer SW Fixed 6-stem

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

RolaBS-RoFormer Stały separator audio six-stem

Dlaczego jest używanyWybrany, ponieważ BS-RoFormer SW Fixed 6-stem wychodzi vocals, drums, bass, guitar, piano i inne, z publicznymi MVSep i BS-RoFormer odniesieniami.

Wpływ na produkcjęSześć WAV stems

ModelHT Demucs

facebookresearch/demucs HT Demucs paper

RolaPunkt odniesienia separacji / awans

Dlaczego jest używanyHT Demucs to silne źródło otwartego źródła; To narzędzie wykorzystuje BS-RoFormer SW Fixed 6-stem, ponieważ bezpośrednio celuje w sześć wyświetlanych stems.

Wpływ na produkcjęKontekst lub stems

Wykres referencyjny: MVSep BS-RoFormer Dane six-stem stałe / Wiersze walidacyjne MVSep piano-stem / Wiersze walidacyjne MVSep guitar-stem

Zakres open source i wdrożeń lokalnych: tabele obejmują tylko wiersze ze zweryfikowanymi, dostępnymi do pobrania wagami lub konfiguracjami i ścieżką lokalnego wdrożenia. SOTA i Najlepszy dotyczą wyłącznie pokazanych zweryfikowanych wierszy, bez systemów hostowanych, tylko API lub komercyjnych, i nie są uniwersalnym rankingiem.

MVSep BS-RoFormer Dane six-stem stałe

MVSep Multisong entry 8374

Dzięki temu rząd BS-RoFormer SW Fixed 6-stem rozmieszczony jest obok publicznego htdemucs_6s bazowy. Wiersze Test, RA, Logic i UVR w pobliżu to warianty lub testy, a nie model narzędzia.

Notatki z artykułu i benchmarków	Model	Wokal SDR (dB)	Szczegółowe metryki
MVSep entry 8374	BS-RoFormer SW Fixed 6-stemTelkNetMVSep entry 8374 To narzędzie wykorzystuje BS-RoFormer SW Fixed do vocals, drums, bass, guitar, piano i innych.	11.3019	Instrumentalny SDR (dB)17.5091Bas SDR (dB)14.6235Bębny SDR (dB)14.1129Gitara SDR (dB)9.0500Fortepian SDR (dB)7.8300Inne SDR (dB)8.7169

Wiersze walidacyjne MVSep piano-stem

MVSep Piano scores

MVSep publikuje oddzielne wiersze walidacyjne piano-stem dla separatorów zdolnych do six-stem. Te wiersze wyjaśniają, dlaczego obecny model BS-RoFormer stałego SW jest używany do piano wyjścia.

Stopień	Model	Fortepian SDR (dB)	Szczegółowe metryki
MVSep entry 9578	BS-RoFormer SW FixedTelkNetMVSep entry 9578	7.8031SOTA	Inne SDR (dB)19.5824Najlepszy
MVSep entry 7396	Ensemble (SCNet + Mel)MVSep entry 7396	6.2054	Inne SDR (dB)18.4851
MVSep entry 7395	SCNet Large (2024.09)MVSep entry 7395	5.8912	Inne SDR (dB)18.1698
MVSep entry 7394	MelRoformer (viperx)MVSep entry 7394	5.7118	Inne SDR (dB)17.9917
MVSep entry 7392	mdx23c (2024.09)MVSep entry 7392	5.5996	Inne SDR (dB)17.8796
MVSep entry 7390	mdx23c (2023.08)MVSep entry 7390	4.7969	Inne SDR (dB)17.0766

Wiersze walidacyjne MVSep guitar-stem

MVSep Guitar scores

MVSep publikuje oddzielne wiersze walidacyjne guitar-stem dla separatorów zdolnych do six-stem. Te wiersze dostarczają kontekstu modelu do wdrożenia, którego brakuje w pojedynczej six-stem rankingu.

Stopień	Model	Gitara SDR (dB)	Szczegółowe metryki
MVSep entry 9245	BS-RoFormer SW FixedTelkNetMVSep entry 9245	9.0120SOTA	Inne SDR (dB)15.9828Najlepszy
MVSep entry 7149	Ensemble (BSRoformer + MelRoformer)MVSep entry 7149	7.5112	Inne SDR (dB)14.4820
MVSep entry 6741	Ensemble (mdx23 + MelRoformer)MVSep entry 6741	7.1835	Inne SDR (dB)14.1542
MVSep entry 6776	BSRoformer (viperx)MVSep entry 6776	7.1266	Inne SDR (dB)13.9775
MVSep entry 6720	MelRoformer (2024.06)MVSep entry 6720	7.0211	Inne SDR (dB)13.9919
MVSep entry 6740	mdx23c (2024.06)MVSep entry 6740	6.3422	Inne SDR (dB)13.3130

Notatki z artykułu i benchmarków

Music Source Separation with Band-Split RoPE Transformer

SDX23 music separation track - 2023

BS-RoFormer wykorzystuje funkcje spektrogramu podziału pasmowego oraz transformatory RoPE; system SDX23 zajął pierwsze miejsce w ścieżce separacji źródeł muzyki, a mniejsza wersja wykazała średnią SDR 9,80 dB na MUSDB18HQ.

arXiv:2309.02612

Hybrid Transformers for Music Source Separation

ICASSP - 2023

HT Demucs zastępuje warstwy rdzeniowe Demucs cross-domain Transformer attention i raportuje 9,20 dB SDR z dodatkowymi danymi i precyzyjnym dostrojeniem.

arXiv:2211.08553

Oficjalne / repozytoria

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator

Artykuły / notatki techniczne

BS-RoFormer

Przewodnik po parametrach

Model: BS-RoFormer SW Fixed 6-stem (BS-Rofo-SW-Fixed.ckpt).
Wyjścia audio: vocals, drums, bass, guitar, piano i other WAV stems.
Opcje modelu: publiczne odniesienie algorytmu MVSep wymienia ten wpis jako sep_type=63. TelkNet uruchamia lokalne BS-RoFormer wagi SW, a nie zewnętrzną MVSep API. Nie ma add_opt kontroli, więc narzędzie korzysta z oficjalnej domyślnej konfiguracji jakości.

Przypadki użycia

Usuń
Dialog
Niestandardowe wydzielanie/usuwanie stemu

Przepływ pracy

1Wybierz pliki audio lub wideo
2Docelowy stem
3Wideo jest wykrywane automatycznie. Możesz je przyciąć, przetworzyć dźwięk i ponownie wstawić wybrany wynik.

Lista kontrolna przed lotem

Suchy wokal
Tylko audio
Wyczyść wszystko

Dowody modelowe w tym biegu

Modele, parametry i źródła

Six-Stem Separation dzieli mieszankę na six WAV stems: vocals, drums, bass, guitar, piano i inne.

BS-RoFormer SW Fixed 6-stem

Model

BS-Rofo-SW-Fixed.ckpt + YAML

BS-RoFormer SW Fixed używa BS-Rofo-SW-Fixed.ckpt plus BS-Rofo-SW-Fixed.yaml do podzielenia pełnego miksu na six WAV stems.

Wyjście audio: vocals, drums, bass, guitar, piano i other WAV stems.
Przydatne do przeglądu aranżacji, materiałów do ćwiczeń, przygotowania do remiksu oraz przekształcania miksowanych utworów w osobne pliki stem.

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

Porównanie modeli

BS-RoFormer SW Fixed 6-stem

BS-RoFormer Stały separator audio six-stem

Wybrany, ponieważ BS-RoFormer SW Fixed 6-stem wychodzi vocals, drums, bass, guitar, piano i inne, z publicznymi MVSep i BS-RoFormer odniesieniami.

Sześć WAV stems

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

HT Demucs

Punkt odniesienia separacji / awans

HT Demucs to silne źródło otwartego źródła; To narzędzie wykorzystuje BS-RoFormer SW Fixed 6-stem, ponieważ bezpośrednio celuje w sześć wyświetlanych stems.

Kontekst lub stems

facebookresearch/demucs HT Demucs paper

Przewodnik po parametrach

Model: BS-RoFormer SW Fixed 6-stem (BS-Rofo-SW-Fixed.ckpt).
Wyjścia audio: vocals, drums, bass, guitar, piano i other WAV stems.
Opcje modelu: publiczne odniesienie algorytmu MVSep wymienia ten wpis jako sep_type=63. TelkNet uruchamia lokalne BS-RoFormer wagi SW, a nie zewnętrzną MVSep API. Nie ma add_opt kontroli, więc narzędzie korzysta z oficjalnej domyślnej konfiguracji jakości.

Artykuły / notatki techniczne

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

Wejście

TelkNet QA — batch-a

Demo

2 ścieżki audio

TelkNet QA — batch-a

Jeden docelowy stem albo miks bez wybranego źródła.

0:00 / 0:30

Gitara

0.0 dB

0.00s

vocals

0.0 dB

0.00s

0:000:050:100:150:200:250:30

W trakcie konserwacji

To narzędzie jest w trakcie konserwacji. Proszę, spróbuj ponownie później.

Niestandardowe wydzielanie/usuwanie stemu

Modele, parametry i źródła

BS-RoFormer SW Fixed 6-stem

Porównanie modeli

Wykres referencyjny: MVSep BS-RoFormer Dane six-stem stałe / Wiersze walidacyjne MVSep piano-stem / Wiersze walidacyjne MVSep guitar-stem

MVSep BS-RoFormer Dane six-stem stałe

Wiersze walidacyjne MVSep piano-stem

Wiersze walidacyjne MVSep guitar-stem

Notatki z artykułu i benchmarków

Music Source Separation with Band-Split RoPE Transformer

Hybrid Transformers for Music Source Separation

Oficjalne / repozytoria

Artykuły / notatki techniczne

Przewodnik po parametrach

Przypadki użycia

Przepływ pracy

Lista kontrolna przed lotem

Dowody modelowe w tym biegu

BS-RoFormer SW Fixed 6-stem

Porównanie modeli

Przewodnik po parametrach

Artykuły / notatki techniczne

W trakcie konserwacji

Szybka opinia