Розділення та stemGPU навантаження

Гармонійне розділення

Q: Для кого Гармонійне розділення (BS-Kar-Gabox_IS + BS-Kar-Frazer)?

Розділення та stem Завантажуйте harmony vocals, vocals з гармонією, акомпанемент з гармонією, акомпанемент без гармонії та vocals без гармонії

Q: З якими завданнями Гармонійне розділення (BS-Kar-Gabox_IS + BS-Kar-Frazer) може допомогти?

Розділення та stem; Завантажуйте harmony vocals, vocals з гармонією, акомпанемент з гармонією, акомпанемент без гармонії та vocals без гармонії; Позиціонування: п'яти-stem гармонія, розділена з harmony vocals, vocals з гармонією, гармонійним акомпанементом, чистим акомпанементом і чистим vocal для каверів, практики та детального мікшування; Розділення гармоній: MVSep 9205 BS-Kar AVG працює на повному міксі; Leap XE надає vocals гармонію, а BS PolarFormer забезпечує акомпанемент.; Розділення гармоній: вилучення матеріалу лише з гармонією або лише свинцем; Розділення гармоній: експортний акомпанемент як з гармонією, так і без неї

Позиціонування: п'яти-stem гармонія, розділена з harmony vocals, vocals з гармонією, гармонійним акомпанементом, чистим акомпанементом і чистим vocal для каверів, практики та детального мікшування

Завантажуйте harmony vocals, vocals з гармонією, акомпанемент з гармонією, акомпанемент без гармонії та vocals без гармонії

4 кредити/використанняВхід аудіофайлуMax 50 MBОцінка — 180-900 секунди

Вхідні дані

Розділення гармоній: MVSep 9205 BS-Kar AVG працює на повному міксі; Leap XE надає vocals гармонію, а BS PolarFormer забезпечує акомпанемент.

Аудіоформати

mp3wavflacoggm4aaac

Вихід

Кейс використання

Моделі, параметри та джерела

Розділення гармонії: MVSep 9205 мережа BS-Kar AVG публічних вагових мереж працює на повному міксі; Leap XE та BS PolarFormer забезпечують референсні stems.

BS-Kar-Gabox_IS + BS-Kar-Frazer&Becruily + BS-Kar-Anvuew (AVG)BS-RoFormer Leap XE 90 bands (vocals reference)BS PolarFormer public ONNX 62 bands (accompaniment reference)MVSep 9205GaboxR67 bs_karaoke_gabox_ISbecruily Frazer/Becruily weightsanvuew karaoke_bs_roformeraudio-separator ensemble runtimeMel-Band RoFormerMVSep 10178 Leap XEpcunwa Leap XE weightsBS-RoFormer

BS-Kar-Gabox_IS + BS-Kar-Frazer&Becruily + BS-Kar-Anvuew (AVG)

Розподіл лідерів/назад, вірний у таблиці лідерів. MVSep 9205 BS-Kar AVG працює безпосередньо на повному міксі з avg_wave, відповідаючи запису 9205, а не лише vocal stem.

MVSep 9205 GaboxR67 bs_karaoke_gabox_IS becruily Frazer/Becruily weights anvuew karaoke_bs_roformer audio-separator ensemble runtime Mel-Band RoFormer

Активні MVSep 9205 checkpoints: BS-Kar-Gabox_IS, BS-Kar-Frazer і Becruily, а також BS-Kar-Anvuew з avg_wave ансамблем.
MVSep 9205 виходи: vocals_without_harmony плюс бекграунд + інструментал з оригінального повного міксу.
Кінцевий вихід гармонії: backing_vocals обчислюється як vocals_with_harmony мінус vocals_without_harmony.

BS-RoFormer Leap XE 90 bands (vocals reference)

MVSep 10178 Leap XE pcunwa Leap XE weights BS-RoFormer

Активні активи: bs_leap_xe_voc.ckpt, leap_xe_config_voc.yaml, bs_polarformer.onnx та model_bs_polarformer_float16.yaml.
Основна stems: Leap XE vocals_with_harmony та BS PolarFormer accompaniment_without_harmony.
Пресет якості: Leap XE 90 vocal еталонний + BS PolarFormer public ONNX 62 акомпанемент; PolarFormer 44.1 kHz ONNX inference, chunk_size 882000, num_overlap 2, WAV вихід.

BS PolarFormer public ONNX 62 bands (accompaniment reference)

MVSep 10009 PolarFormer public BS PolarFormer public ONNX BS-RoFormer

Активні активи: bs_leap_xe_voc.ckpt, leap_xe_config_voc.yaml, bs_polarformer.onnx та model_bs_polarformer_float16.yaml.
Основна stems: Leap XE vocals_with_harmony та BS PolarFormer accompaniment_without_harmony.
Пресет якості: Leap XE 90 vocal еталонний + BS PolarFormer public ONNX 62 акомпанемент; PolarFormer 44.1 kHz ONNX inference, chunk_size 882000, num_overlap 2, WAV вихід.

audio-separator runtime

Обгортка для UVR/MVSep типу роздільника checkpoints. Він забезпечує завантаження моделі, експорт WAV stem та обробку аудіоформатів з підтримкою FFmpeg, які використовується цим інструментом.

python-audio-separator audio-separator PyPI audio-separator model weights

Час виконання: локальний Leap XE PyTorch vocal референс, BS PolarFormer ONNX акомпанемент, плюс MVSep 9205 AVG ступені, сумісний з аудіо-сепаратором 0.44.1, з локальними модельними ресурсами.
Формати введення перевіряються через шлях FFmpeg/ffprobe: mp3, wav, flac, ogg, m4a та aac.

Порівняння моделей

Модель

Роль

Чому це використовується

Вплив на результат

МодельBS-RoFormer Leap XE 90 bands (vocals reference)

MVSep 10178 Leap XE pcunwa Leap XE weights BS-RoFormer

РольДвомодельний vocal/акомпанемент посилання

Чому це використовуєтьсяLeap XE надає очистювач vocal референсу; BS PolarFormer забезпечує accompaniment_without_harmony, щоб залишок лише гармонії можна отримати без зниження MVSep 9205 пресета.

Вплив на результатВокальне референс + акомпанемент без гармонії

МодельBS PolarFormer public ONNX 62 bands (accompaniment reference)

MVSep 10009 PolarFormer public BS PolarFormer public ONNX BS-RoFormer

РольДвомодельний vocal/акомпанемент посилання

Вплив на результатВокальне референс + акомпанемент без гармонії

МодельMVSep 9205 BS-Kar AVG ensemble

MVSep 9205 GaboxR67 bs_karaoke_gabox_IS becruily Frazer/Becruily weights anvuew karaoke_bs_roformer audio-separator ensemble runtime Mel-Band RoFormer

РольПряме повне відокремлення свинця та зворотного відведення

Чому це використовуєтьсяMVSep 9205 BS-Kar AVG працює на оригінальному міксі з avg_wave, що відповідає опублікованому шляху лідерборду Lead/Back.

Вплив на результатВокал без гармонії + бек-вокал/інструментальна основа

Публічна таблиця лідерів: Підтверджений рейтинг у публічній вазі vocals / Підтверджений рейтинг акомпанементу за загальною вагою / Підтверджено лідерство / підтримка у публічній вазі vocal рейтингу

Обсяг відкритих локально розгортаних моделей: таблиці містять лише рядки з перевіреними доступними для завантаження вагами або конфігураціями та шляхом локального запуску. SOTA й «Найкращий» стосуються тільки показаних перевірених рядків, не включають хостовані, лише API чи комерційні системи й не є універсальним рейтингом.

Підтверджений рейтинг у публічній вазі vocals

MVSep metrics + verified weights

Підтверджений багатопісенний варіант лише vocals SDR рядів. TelkNet використовує Leap XE 90 для vocals; Hosted, API-only або неперевірені рядки MVSep виключені з цього рейтингу.

Ранг	Модель	Вокал SDR (dB)	Докладні метрики
MVSep entry 10178	BS-RoFormer Leap XE 90 bands (pcunwa)TelkNetMVSep 10178 metric	11.7577SOTA	Інструментальна SDR (dB)17.5303
MVSep entry 10009	BS PolarFormer public ONNX 62 bands (bgkb/ZFTurbo)MVSep 10009 metric	11.7575	Інструментальна SDR (dB)18.0650Найкращий
MVSep entry 10173	BS-RoFormer Leap vocal-only (pcunwa)MVSep 10173 metric	11.7398
MVSep entry 10146	BS-RoFormer Leap 62 bands (pcunwa)MVSep 10146 metric	11.7222	Інструментальна SDR (dB)17.7794

Підтверджений рейтинг акомпанементу за загальною вагою

MVSep metrics + verified weights

Підтверджений лише багатопісенний інструментальний SDR ряди. TelkNet використовує BS PolarFormer public ONNX 62 для акомпанементу; Хостовані, лише API або неперевірені MVSep рядки виключаються.

Ранг	Модель	Інструментальна SDR (dB)	Докладні метрики
MVSep entry 10009	BS PolarFormer public ONNX 62 bands (bgkb/ZFTurbo)TelkNetMVSep 10009 metric	18.0650SOTA	Вокал SDR (dB)11.7575
MVSep entry 10146	BS-RoFormer Leap 62 bands (pcunwa)MVSep 10146 metric	17.7794	Вокал SDR (dB)11.7222
MVSep entry 10178	BS-RoFormer Leap XE 90 bands (pcunwa)MVSep 10178 metric	17.5303	Вокал SDR (dB)11.7577Найкращий

Підтверджено лідерство / підтримка у публічній вазі vocal рейтингу

MVSep metrics + verified weights

Лід/задні рядки сортуються за Lead SDR і зберігаються лише після перевірки ваг компонентів як публічних і придатних для розгортання. Цей інструмент використовує шлях MVSep 9205 AVG публічної ваги безпосередньо на повному міксі.

Ранг	Модель	Веди vocals SDR (dB)	Докладні метрики
MVSep entry 9205	BS-Kar-Gabox_IS + BS-Kar-Frazer&Becruily + BS-Kar-Anvuew (AVG)TelkNetMVSep 9205 metric	10.4296SOTA	Повернення vocals + інструментальний SDR (dB)15.8159Найкращий
MVSep entry 9190	BS-karaoke-Frazer&Becruily + BS-Karaoke-Anvuew (AVG)MVSep 9190 metric	10.3596	Повернення vocals + інструментальний SDR (dB)15.7459
MVSep entry 9209	BS Roformer Karaoke by anvuewMVSep 9209 metric	10.2267	Повернення vocals + інструментальний SDR (dB)15.6095
MVSep entry 9212	BS-Kar-Gabox_IS + BS-Kar-Frazer&Becruily + BS-Kar-Anvuew (Max Spec)MVSep 9212 metric	10.1718	Повернення vocals + інструментальний SDR (dB)15.4680
MVSep entry 9180	BS-Roformer Karaoke anvuewMVSep 9180 metric	10.1705	Повернення vocals + інструментальний SDR (dB)15.5568
MVSep entry 9013	BS-Roformer Karaoke (frazer & becruily)MVSep 9013 metric	10.0640	Повернення vocals + інструментальний SDR (dB)15.4503
MVSep entry 9198	BS Roformer Karaoke GaboxMVSep 9198 metric	9.8901	Повернення vocals + інструментальний SDR (dB)15.2763

Паперові та бенчмаркові нотатки

Mel-Band RoFormer for Music Source Separation

arXiv / ISMIR late-breaking demo - 2023

Mel-RoFormer замінює евристичні неперекриваючі діапазони на перекриваючі мел-діапазони піддіапазонів і демонструє кращу сепарацію, ніж BS-RoFormer для vocals, drums та інших stems на MUSDB18HQ.

arXiv:2310.01809

Music Source Separation with Band-Split RoPE Transformer

SDX23 music separation track - 2023

BS-RoFormer використовує спектрограми з розділенням смуги плюс RoPE-трансформатори; система SDX23 посіла перше місце за розділенням музичних джерел, а менша версія показала середній показник 9,80 дБ SDR на MUSDB18HQ.

arXiv:2309.02612

The Sound Demixing Challenge 2023 - Music Demixing Track

TISMIR - 2024

Папір для деміксування музики SDX23 містить надійні тести MSS, тести на прослуховування, а також підтверджує, що найкраща система покращилася порівняно з попереднім викликом більш ніж на 1,6 дБ SDR MDXDB21.

TISMIR 2024

Офіційні / репозиторії

MVSep 9205 GaboxR67 bs_karaoke_gabox_IS becruily Frazer/Becruily weights anvuew karaoke_bs_roformer audio-separator ensemble runtime MVSep 10178 Leap XE pcunwa Leap XE weights MVSep 10009 PolarFormer public BS PolarFormer public ONNX python-audio-separator audio-separator PyPI audio-separator model weights

Статті / технічні нотатки

Mel-Band RoFormer BS-RoFormer

Керівництво параметрів

Спочатку розділяємо: розділяйте vocals/акомпанемент або stems перед транскрибуванням цільового аудіо.
Зберігайте окремі треки: зберігайте stems або треки для окремого завантаження.
Виділений маршрут: цей інструмент використовує шлях моделі, обраний для цього робочого процесу.

Сценарії використання

Розділення гармоній: вилучення матеріалу лише з гармонією або лише свинцем
Розділення гармоній: експортний акомпанемент як з гармонією, так і без неї
Гармонійне розділення: підготуйте чистіші шари vocal для змішування або RVC

Робочий процес

1Завантажте повний джерело пісні або каверу
2Розділення гармоній: MVSep 9205 BS-Kar AVG працює на повному міксі; Leap XE надає vocals гармонію, а BS PolarFormer забезпечує акомпанемент.
3Завантажуйте harmony vocals, vocals з гармонією, акомпанемент з гармонією, акомпанемент без гармонії та vocals без гармонії

Передпольотний чек-лист

Віддаю перевагу чистому аудіо з обмеженим кліпінгом, дисторшном або реверберацією
Розділення гармонії: перевірте всі три stems разом
Розділення гармонії: обробка матеріалу, а не фінальний ремонт мастерингу

Гармонійне розділення

Моделі, параметри та джерела

Ранг

Модель

Вокал SDR (dB)

Докладні метрики

MVSep entry 10178

BS-RoFormer Leap XE 90 bands (pcunwa)TelkNetMVSep 10178 metric

11.7577SOTA

Інструментальна SDR (dB)17.5303

MVSep entry 10009

BS PolarFormer public ONNX 62 bands (bgkb/ZFTurbo)MVSep 10009 metric

11.7575

Інструментальна SDR (dB)18.0650Найкращий

MVSep entry 10173

BS-RoFormer Leap vocal-only (pcunwa)MVSep 10173 metric

11.7398

MVSep entry 10146

BS-RoFormer Leap 62 bands (pcunwa)MVSep 10146 metric

11.7222

Інструментальна SDR (dB)17.7794

Ранг

Модель

Інструментальна SDR (dB)

Докладні метрики

MVSep entry 10009

BS PolarFormer public ONNX 62 bands (bgkb/ZFTurbo)TelkNetMVSep 10009 metric

18.0650SOTA

Вокал SDR (dB)11.7575

MVSep entry 10146

BS-RoFormer Leap 62 bands (pcunwa)MVSep 10146 metric

17.7794

Вокал SDR (dB)11.7222

MVSep entry 10178

BS-RoFormer Leap XE 90 bands (pcunwa)MVSep 10178 metric

17.5303

Вокал SDR (dB)11.7577Найкращий

Ранг

Модель

Веди vocals SDR (dB)

Докладні метрики

MVSep entry 9205

BS-Kar-Gabox_IS + BS-Kar-Frazer&Becruily + BS-Kar-Anvuew (AVG)TelkNetMVSep 9205 metric

10.4296SOTA

Повернення vocals + інструментальний SDR (dB)15.8159Найкращий

MVSep entry 9190

BS-karaoke-Frazer&Becruily + BS-Karaoke-Anvuew (AVG)MVSep 9190 metric

10.3596

Повернення vocals + інструментальний SDR (dB)15.7459

MVSep entry 9209

BS Roformer Karaoke by anvuewMVSep 9209 metric

10.2267

Повернення vocals + інструментальний SDR (dB)15.6095

MVSep entry 9212

BS-Kar-Gabox_IS + BS-Kar-Frazer&Becruily + BS-Kar-Anvuew (Max Spec)MVSep 9212 metric

10.1718

Повернення vocals + інструментальний SDR (dB)15.4680

MVSep entry 9180

BS-Roformer Karaoke anvuewMVSep 9180 metric

10.1705

Повернення vocals + інструментальний SDR (dB)15.5568

MVSep entry 9013

BS-Roformer Karaoke (frazer & becruily)MVSep 9013 metric

10.0640

Повернення vocals + інструментальний SDR (dB)15.4503

MVSep entry 9198

BS Roformer Karaoke GaboxMVSep 9198 metric

9.8901

Повернення vocals + інструментальний SDR (dB)15.2763

Сценарії використання

Розділення гармоній: вилучення матеріалу лише з гармонією або лише свинцем

Розділення гармоній: експортний акомпанемент як з гармонією, так і без неї

Гармонійне розділення: підготуйте чистіші шари vocal для змішування або RVC

Робочий процес

1Завантажте повний джерело пісні або каверу

2Розділення гармоній: MVSep 9205 BS-Kar AVG працює на повному міксі; Leap XE надає vocals гармонію, а BS PolarFormer забезпечує акомпанемент.

3Завантажуйте harmony vocals, vocals з гармонією, акомпанемент з гармонією, акомпанемент без гармонії та vocals без гармонії

Передпольотний чек-лист

Віддаю перевагу чистому аудіо з обмеженим кліпінгом, дисторшном або реверберацією

Розділення гармонії: перевірте всі три stems разом

Розділення гармонії: обробка матеріалу, а не фінальний ремонт мастерингу

Гармонійне розділення

Моделі, параметри та джерела

BS-Kar-Gabox_IS + BS-Kar-Frazer&Becruily + BS-Kar-Anvuew (AVG)

BS-RoFormer Leap XE 90 bands (vocals reference)

BS PolarFormer public ONNX 62 bands (accompaniment reference)

audio-separator runtime

Порівняння моделей

Підтверджений рейтинг у публічній вазі vocals

Підтверджений рейтинг акомпанементу за загальною вагою

Підтверджено лідерство / підтримка у публічній вазі vocal рейтингу

Паперові та бенчмаркові нотатки

Mel-Band RoFormer for Music Source Separation

Music Source Separation with Band-Split RoPE Transformer

The Sound Demixing Challenge 2023 - Music Demixing Track

Офіційні / репозиторії

Статті / технічні нотатки

Керівництво параметрів

Сценарії використання

Робочий процес

Передпольотний чек-лист

Гармонійне розділення

Моделі, параметри та джерела

BS-Kar-Gabox_IS + BS-Kar-Frazer&Becruily + BS-Kar-Anvuew (AVG)

BS-RoFormer Leap XE 90 bands (vocals reference)

BS PolarFormer public ONNX 62 bands (accompaniment reference)

audio-separator runtime

Порівняння моделей

Підтверджений рейтинг у публічній вазі vocals

Підтверджений рейтинг акомпанементу за загальною вагою

Підтверджено лідерство / підтримка у публічній вазі vocal рейтингу

Паперові та бенчмаркові нотатки

Mel-Band RoFormer for Music Source Separation

Music Source Separation with Band-Split RoPE Transformer

The Sound Demixing Challenge 2023 - Music Demixing Track

Офіційні / репозиторії

Статті / технічні нотатки

Керівництво параметрів

Сценарії використання

Робочий процес

Передпольотний чек-лист

Для використання цього інструменту потрібен вхід