Hvad er Tilpasset udtræk/fjernelse af spor (RoFormer)?

Et målstem eller et mix uden det valgte mål.; Tilpasset udtræk/fjernelse af spor

Hvem er Tilpasset udtræk/fjernelse af spor (RoFormer) til?

Separation og stem opdeling Et målstem eller et mix uden det valgte mål.; Tilpasset udtræk/fjernelse af spor

Hvilke opgaver kan Tilpasset udtræk/fjernelse af spor (RoFormer) hjælpe med?

Separation og stem opdeling; Et målstem eller et mix uden det valgte mål.; Tilpasset udtræk/fjernelse af spor; Vælg vokal, trommer, bas, guitar, klaver eller andet i musiklyd eller video.; Fjern; Dialog

Separation og stem opdelingGPU arbejdsbyrde

Tilpasset udtræk/fjernelse af spor

Q: Hvilke model- og nøgleordsenheder er forbundet med Tilpasset udtræk/fjernelse af spor (RoFormer)?

BS-RoFormer SW Fixed 6-stem, MVSep BS Roformer SW, MVSep Multisong leaderboard, BS-Rofo-SW-Fixed HF weights, BS-Rofo-SW-Fixed mirror, BS-RoFormer implementation, bs-roformer-infer registry, python-audio-separator

Et målstem eller et mix uden det valgte mål.

6 credits/brugFilinputMax 100 MBAnslået 120-900 sekunder

Input

Vælg vokal, trommer, bas, guitar, klaver eller andet i musiklyd eller video.

Understøttede formater

mp3wavflacoggm4aaacaifaiffmp4movmkv

Output

Et målstem eller et mix uden det valgte mål.

Brugsscenarie

Tilpasset udtræk/fjernelse af spor

Modeller, parametre og kilder

Seks-stammet separation opdeler en blanding i six WAV stems: vocals, drums, bass, guitar, piano og andre.

BS-RoFormer SW Fixed 6-stemMVSep BS Roformer SWMVSep Multisong leaderboardBS-Rofo-SW-Fixed HF weightsBS-Rofo-SW-Fixed mirrorBS-RoFormer implementationbs-roformer-infer registrypython-audio-separatorBS-RoFormerHT Demucsfacebookresearch/demucsHT Demucs paper

BS-RoFormer SW Fixed 6-stem

BS-RoFormer SW Fixed bruger BS-Rofo-SW-Fixed.ckpt plus BS-Rofo-SW-Fixed.yaml til at opdele et fuldt mix i six WAV stems.

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

Lydudgang: vocals, drums, bass, guitar, piano og other WAV stems.
Nyttigt til arrangementgennemgang, øvemateriale, remixforberedelse og til at lave en mixet sang til separate stem-filer.

Modelsammenligning

Model

Rolle

Hvorfor det bruges

Effekteffekt på produktionen

ModelBS-RoFormer SW Fixed 6-stem

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

RolleBS-RoFormer SW Fikseret six-stem lydseparator

Hvorfor det brugesUdvalgt fordi BS-RoFormer SW Fixed 6-stem udgiver vocals, drums, bass, guitar, piano og andre med offentlige MVSep og BS-RoFormer referencer.

Effekteffekt på produktionenSeks WAV stems

ModelHT Demucs

facebookresearch/demucs HT Demucs paper

RolleSeparationsbaseline / fallback

Hvorfor det brugesHT Demucs er en stærk open source-reference; Dette værktøj bruger BS-RoFormer SW Fixed 6-stem, fordi det direkte retter sig mod de seks viste stems.

Effekteffekt på produktionenKontekst eller fallback-stems

Benchmark-diagram: MVSep BS-RoFormer SW Fixed six-stem data / MVSep piano-stem valideringsrækker / MVSep guitar-stem valideringsrækker

Open source og lokalt implementerbart omfang: tabellerne medtager kun rækker med verificerede downloadbare vægte eller konfigurationer og en lokal implementeringsvej. SOTA og Bedst gælder kun blandt de viste verificerede rækker; hostede, API-baserede eller kommercielle systemer er ikke med, og dette er ikke en universel rangliste.

MVSep BS-RoFormer SW Fixed six-stem data

MVSep Multisong entry 8374

Dette holder den deployable BS-RoFormer SW Fixed 6-stem række ved siden af den offentlige htdemucs_6s baseline. Nærliggende Test-, RA-, Logic- og UVR-rækker er varianter eller testkørsler, ikke værktøjsmodellen.

Papir- og benchmarknoter	Model	Vokal SDR (dB)	Detaljerede metrikker
MVSep entry 8374	BS-RoFormer SW Fixed 6-stemTelkNetMVSep entry 8374 Dette værktøj bruger BS-RoFormer SW Fixed til vocals, drums, bass, guitar, piano og andre.	11.3019	Instrumentel SDR (dB)17.5091Bas SDR (dB)14.6235Trommer SDR (dB)14.1129Guitar-SDR (dB)9.0500Klaver SDR (dB)7.8300Andre SDR (dB)8.7169

MVSep piano-stem valideringsrækker

MVSep Piano scores

MVSep offentliggør separate piano-stem valideringsrækker for six-stem-kompatible separatorer. Disse rækker forklarer, hvorfor den nuværende BS-RoFormer SW Fixed-model bruges til piano output.

Rang	Model	Klaver SDR (dB)	Detaljerede metrikker
MVSep entry 9578	BS-RoFormer SW FixedTelkNetMVSep entry 9578	7.8031SOTA	Andre SDR (dB)19.5824Bedst
MVSep entry 7396	Ensemble (SCNet + Mel)MVSep entry 7396	6.2054	Andre SDR (dB)18.4851
MVSep entry 7395	SCNet Large (2024.09)MVSep entry 7395	5.8912	Andre SDR (dB)18.1698
MVSep entry 7394	MelRoformer (viperx)MVSep entry 7394	5.7118	Andre SDR (dB)17.9917
MVSep entry 7392	mdx23c (2024.09)MVSep entry 7392	5.5996	Andre SDR (dB)17.8796
MVSep entry 7390	mdx23c (2023.08)MVSep entry 7390	4.7969	Andre SDR (dB)17.0766

MVSep guitar-stem valideringsrækker

MVSep Guitar scores

MVSep offentliggør separate guitar-stem valideringsrækker for six-stem-kompatible separatorer. Disse rækker giver den deployable modelkontekst, som mangler på en enkelt six-stem leaderboard.

Rang	Model	Guitar-SDR (dB)	Detaljerede metrikker
MVSep entry 9245	BS-RoFormer SW FixedTelkNetMVSep entry 9245	9.0120SOTA	Andre SDR (dB)15.9828Bedst
MVSep entry 7149	Ensemble (BSRoformer + MelRoformer)MVSep entry 7149	7.5112	Andre SDR (dB)14.4820
MVSep entry 6741	Ensemble (mdx23 + MelRoformer)MVSep entry 6741	7.1835	Andre SDR (dB)14.1542
MVSep entry 6776	BSRoformer (viperx)MVSep entry 6776	7.1266	Andre SDR (dB)13.9775
MVSep entry 6720	MelRoformer (2024.06)MVSep entry 6720	7.0211	Andre SDR (dB)13.9919
MVSep entry 6740	mdx23c (2024.06)MVSep entry 6740	6.3422	Andre SDR (dB)13.3130

Papir- og benchmarknoter

Music Source Separation with Band-Split RoPE Transformer

SDX23 music separation track - 2023

BS-RoFormer bruger båndopdelt spektrogramfunktioner plus RoPE-transformere; SDX23-systemet blev nummer et i musikkildeadskillelsessporet, og en mindre version rapporterede et gennemsnitligt SDR på 9,80 dB på MUSDB18HQ.

arXiv:2309.02612

Hybrid Transformers for Music Source Separation

ICASSP - 2023

HT Demucs erstatter kerne-Demucs-lag med cross-domain Transformer attention og rapporterer 9,20 dB SDR med ekstra data og finjustering.

arXiv:2211.08553

Officielle / arkiver

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator

Artikler / tekniske noter

BS-RoFormer

Parameterguide

Model: BS-RoFormer SW Fixed 6-stem (BS-Rofo-SW-Fixed.ckpt).
Lydudgange: vocals, drums, bass, guitar, piano og other WAV stems.
Modelmuligheder: den offentlige MVSep algoritmereference angiver denne post som sep_type=63. TelkNet kører lokale BS-RoFormer SW-vægte, ikke et eksternt MVSep API-job. Den har ingen add_opt kontroller, så værktøjet bruger den officielle standardkvalitetskonfiguration.

Brugsscenarier

Fjern
Dialog
Tilpasset udtræk/fjernelse af spor

Arbejdsgang

1Vælg lyd- eller videofiler
2Målstamme
3Video registreres automatisk. Klip om nødvendigt, behandl lyden, og mux det valgte resultat tilbage i videoen.

Tjekliste før flyvning

Tør vokal
Kun lyd
Ryd alle

Modelbeviser i denne gennemløb

Modeller, parametre og kilder

Seks-stammet separation opdeler en blanding i six WAV stems: vocals, drums, bass, guitar, piano og andre.

BS-RoFormer SW Fixed 6-stem

Model

BS-Rofo-SW-Fixed.ckpt + YAML

BS-RoFormer SW Fixed bruger BS-Rofo-SW-Fixed.ckpt plus BS-Rofo-SW-Fixed.yaml til at opdele et fuldt mix i six WAV stems.

Lydudgang: vocals, drums, bass, guitar, piano og other WAV stems.
Nyttigt til arrangementgennemgang, øvemateriale, remixforberedelse og til at lave en mixet sang til separate stem-filer.

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

Modelsammenligning

BS-RoFormer SW Fixed 6-stem

BS-RoFormer SW Fikseret six-stem lydseparator

Udvalgt fordi BS-RoFormer SW Fixed 6-stem udgiver vocals, drums, bass, guitar, piano og andre med offentlige MVSep og BS-RoFormer referencer.

Seks WAV stems

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

HT Demucs

Separationsbaseline / fallback

HT Demucs er en stærk open source-reference; Dette værktøj bruger BS-RoFormer SW Fixed 6-stem, fordi det direkte retter sig mod de seks viste stems.

Kontekst eller fallback-stems

facebookresearch/demucs HT Demucs paper

Parameterguide

Model: BS-RoFormer SW Fixed 6-stem (BS-Rofo-SW-Fixed.ckpt).
Lydudgange: vocals, drums, bass, guitar, piano og other WAV stems.
Modelmuligheder: den offentlige MVSep algoritmereference angiver denne post som sep_type=63. TelkNet kører lokale BS-RoFormer SW-vægte, ikke et eksternt MVSep API-job. Den har ingen add_opt kontroller, så værktøjet bruger den officielle standardkvalitetskonfiguration.

Artikler / tekniske noter

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

Input

TelkNet QA — batch-a

Demo

2 lydspor

TelkNet QA — batch-a

Et målstem eller et mix uden det valgte mål.

0:00 / 0:30

Guitar

0.0 dB

0.00s

vocals

0.0 dB

0.00s

0:000:050:100:150:200:250:30

Under vedligeholdelse

Dette værktøj er under vedligeholdelse. Prøv venligst igen senere.

Hurtig feedback

Skriv dit forslag eller ønske her og send det. Vi lytter til hver eneste stemme og arbejder på at gøre gode idéer til rigtige funktioner.

Tilpasset udtræk/fjernelse af spor (RoFormer) · TelkNet