Hvem er Vokal-/akkompagnementsadskillelse (RoFormer) til?

Separation og stem opdeling Hent vocal og akkompagnement som WAV stems

Vokal-/akkompagnementsadskillelse (RoFormer) · TelkNet

Separation og stem opdelingGPU arbejdsbyrde

Vokal-/akkompagnementsadskillelse

Q: Hvilke opgaver kan Vokal-/akkompagnementsadskillelse (RoFormer) hjælpe med?

Separation og stem opdeling; Hent vocal og akkompagnement som WAV stems; Positionering: open-weight, lokalt deployerbar to-stem vocal/akkompagnementsseparation til øvelse, covers, mixning og prøvetagningsforberedelse.; Hele sange, cover-kilder eller mixet lyd; BS-RoFormer Leap XE 90-bånd sender vocals og BS PolarFormer public ONNX 62-bånd sender akkompagnement.; Vokal-/akkompagnementsadskillelse: uddrag vocal materiale; Vokal-/akkompagnementsseparation: eksport af akkompagnementsmateriale

Q: Hvilke model- og nøgleordsenheder er forbundet med Vokal-/akkompagnementsadskillelse (RoFormer)?

BS-RoFormer Leap XE 90 bands (vocals output), BS PolarFormer public ONNX 62 bands (accompaniment output), MVSep 10178 Leap XE, pcunwa Leap XE weights, BS-RoFormer, MVSep 10009 PolarFormer public, BS PolarFormer public ONNX, audio-separator runtime

Positionering: open-weight, lokalt deployerbar to-stem vocal/akkompagnementsseparation til øvelse, covers, mixning og prøvetagningsforberedelse.

Hent vocal og akkompagnement som WAV stems

4 credits/brugFilinputMax 50 MBAnslået 180-900 sekunder

Input

Hele sange, cover-kilder eller mixet lyd; BS-RoFormer Leap XE 90-bånd sender vocals og BS PolarFormer public ONNX 62-bånd sender akkompagnement.

Understøttede formater

mp3wavflacoggm4aaacaifaiffmp4movmkv

Output

Hent vocal og akkompagnement som WAV stems

Brugsscenarie

Positionering: open-weight, lokalt deployerbar to-stem vocal/akkompagnementsseparation til øvelse, covers, mixning og prøvetagningsforberedelse.

Modeller, parametre og kilder

Open-weight vocal/akkompagnement-separation: vocal stem kommer fra BS-RoFormer Leap XE 90-bands, og akkompagnementet stem kommer fra BS PolarFormer public ONNX 62-bands til redigering, covers, transskriptionsforberedelse og downstream lydarbejde.

BS-RoFormer Leap XE 90 bands (vocals output)BS PolarFormer public ONNX 62 bands (accompaniment output)MVSep 10178 Leap XEpcunwa Leap XE weightsBS-RoFormerMVSep 10009 PolarFormer publicBS PolarFormer public ONNXaudio-separator runtimepython-audio-separatoraudio-separator PyPIaudio-separator model weightsMVSep metrics + verified weights

BS-RoFormer Leap XE 90 bands (vocals output)

MVSep 10178 Leap XE pcunwa Leap XE weights BS-RoFormer

BS PolarFormer public ONNX 62 bands (accompaniment output)

MVSep 10009 PolarFormer public BS PolarFormer public ONNX BS-RoFormer

audio-separator runtime

Runtime-wrapper til UVR/MVSep-stil separator checkpoints. Den leverer modelindlæsning, eksport WAV stem og FFmpeg-understøttet lydformathåndtering, som dette værktøj bruger.

python-audio-separator audio-separator PyPI audio-separator model weights

Offentlig leaderboard: Verificeret offentlig vægt vocals rangering / Verificeret rangordning for offentlige vægte ledsagere

Open source og lokalt implementerbart omfang: tabellerne medtager kun rækker med verificerede downloadbare vægte eller konfigurationer og en lokal implementeringsvej. SOTA og Bedst gælder kun blandt de viste verificerede rækker; hostede, API-baserede eller kommercielle systemer er ikke med, og dette er ikke en universel rangliste.

Verificeret offentlig vægt vocals rangering

MVSep metrics + verified weights

Verificeret offentlig vægt Multisong vocals SDR kun rækker. TelkNet bruger Leap XE 90 til vocals; hostede, API-only eller ikke-verificerbare MVSep-rækker er udelukket fra denne rangering.

Rang	Model	Vokal SDR (dB)	Detaljerede metrikker
MVSep entry 10178	BS-RoFormer Leap XE 90 bands (pcunwa)TelkNetMVSep 10178 metric	11.7577SOTA	Instrumental-SDR (dB)17.5303
MVSep entry 10009	BS PolarFormer public ONNX 62 bands (bgkb/ZFTurbo)MVSep 10009 metric	11.7575	Instrumental-SDR (dB)18.0650Bedst
MVSep entry 10173	BS-RoFormer Leap vocal-only (pcunwa)MVSep 10173 metric	11.7398
MVSep entry 10146	BS-RoFormer Leap 62 bands (pcunwa)MVSep 10146 metric	11.7222	Instrumental-SDR (dB)17.7794

Verificeret rangordning for offentlige vægte ledsagere

MVSep metrics + verified weights

Verificeret offentlig vægt Multisong instrumental SDR kun rækker. TelkNet bruger BS PolarFormer public ONNX 62 som akkompagnement; hostede, API-only eller ikke-verificerbare MVSep rækker er udelukket.

Rang	Model	Instrumental-SDR (dB)	Detaljerede metrikker
MVSep entry 10009	BS PolarFormer public ONNX 62 bands (bgkb/ZFTurbo)TelkNetMVSep 10009 metric	18.0650SOTA	Vokal SDR (dB)11.7575
MVSep entry 10146	BS-RoFormer Leap 62 bands (pcunwa)MVSep 10146 metric	17.7794	Vokal SDR (dB)11.7222
MVSep entry 10178	BS-RoFormer Leap XE 90 bands (pcunwa)MVSep 10178 metric	17.5303	Vokal SDR (dB)11.7577Bedst

Papir- og benchmarknoter

Music Source Separation with Band-Split RoPE Transformer

SDX23 music separation track - 2023

BS-RoFormer bruger båndopdelt spektrogramfunktioner plus RoPE-transformere; SDX23-systemet blev nummer et i musikkildeadskillelsessporet, og en mindre version rapporterede et gennemsnitligt SDR på 9,80 dB på MUSDB18HQ.

arXiv:2309.02612

The Sound Demixing Challenge 2023 - Music Demixing Track

TISMIR - 2024

SDX23 musikdemixerpapiret dokumenterer robuste MSS-benchmarks, lyttetests, og at det bedste system forbedrede sig i forhold til den tidligere udfordring med mere end 1,6 dB SDR på MDXDB21.

TISMIR 2024

Officielle / arkiver

MVSep 10178 Leap XE pcunwa Leap XE weights MVSep 10009 PolarFormer public BS PolarFormer public ONNX python-audio-separator audio-separator PyPI audio-separator model weights

Artikler / tekniske noter

BS-RoFormer

Parameterguide

Separat først: split vocals/akkompagnement eller stems før du transskriberer mållyden.
Gem adskilte spor: gemmer stems eller sporudgange til separat download.
Dedikeret rute: dette værktøj bruger modelstien, der er valgt til dette workflow.

Brugsscenarier

Vokal-/akkompagnementsadskillelse: uddrag vocal materiale
Vokal-/akkompagnementsseparation: eksport af akkompagnementsmateriale
Vokal-/akkompagnementsadskillelse: forbered renere stems til MIDI eller RVC

Arbejdsgang

1Upload hele sangen eller cover-kilden
2Kør Leap XE 90 vocals og PolarFormer offentlige 62 akkompagnementsben separat, og eksporter derefter to rigtige stems.
3Hent vocal og akkompagnement som WAV stems

Tjekliste før flyvning

Foretræk klar lyd med begrænset clipping, forvrængning eller rumklang
Vokal-/akkompagnementsadskillelse: tjek vocal og akkompagnement separat
Vokal/akkompagnement-adskillelse: bearbejdning af materiale, ikke endelig masteringreparation

Relaterede brugsguides

Siderne bruger de opgaver folk søger efter og linker til værktøjer, modelgrænser, kilder og FAQ.

RVC voice conversion onlineværktøj og modelguide AI cover maker onlineværktøj og modelguide vocal remover onlineværktøj og modelguide four stem splitter onlineværktøj og modelguide six stem splitter onlineværktøj og modelguide

Hurtig feedback

Skriv dit forslag eller ønske her og send det. Vi lytter til hver eneste stemme og arbejder på at gøre gode idéer til rigtige funktioner.