Что такое Выборочное извлечение/удаление стема (RoFormer)?

Один целевой стем либо микс без выбранного источника.; Для практики, аккомпанемента, ремикса, сэмплирования и точечной очистки.

Для кого Выборочное извлечение/удаление стема (RoFormer)?

Разделение и stem разделение Один целевой стем либо микс без выбранного источника.; Для практики, аккомпанемента, ремикса, сэмплирования и точечной очистки.

С какими задачами Выборочное извлечение/удаление стема (RoFormer) может помочь?

Разделение и stem разделение; Один целевой стем либо микс без выбранного источника.; Для практики, аккомпанемента, ремикса, сэмплирования и точечной очистки.; Музыкальное аудио или видео; выберите вокал, ударные, бас, гитару, фортепиано или другое.; Извлечь только выбранный инструмент; Удалить одну цель, сохранив остальной микс

Выборочное извлечение/удаление стема (RoFormer) · TelkNet

Разделение и stem разделениеGPU нагрузка

Выборочное извлечение/удаление стема

Q: Какие модели и ключевые слова связаны с Выборочное извлечение/удаление стема (RoFormer)?

BS-RoFormer SW Fixed 6-stem, MVSep BS Roformer SW, MVSep Multisong leaderboard, BS-Rofo-SW-Fixed HF weights, BS-Rofo-SW-Fixed mirror, BS-RoFormer implementation, bs-roformer-infer registry, python-audio-separator

Для практики, аккомпанемента, ремикса, сэмплирования и точечной очистки.

Один целевой стем либо микс без выбранного источника.

6 кредиты/использованиеВвод файловMax 100 MBОценка 120-900 секунд

Вход

Музыкальное аудио или видео; выберите вокал, ударные, бас, гитару, фортепиано или другое.

Поддерживаемые форматы

mp3wavflacoggm4aaacaifaiffmp4movmkv

Результаты

Один целевой стем либо микс без выбранного источника.

Сценарий использования

Для практики, аккомпанемента, ремикса, сэмплирования и точечной очистки.

Модели, параметры и источники

Разделение шести стеблей делит смесь на six WAV stems: vocals, drums, bass, guitar, piano и другие.

BS-RoFormer SW Fixed 6-stemMVSep BS Roformer SWMVSep Multisong leaderboardBS-Rofo-SW-Fixed HF weightsBS-Rofo-SW-Fixed mirrorBS-RoFormer implementationbs-roformer-infer registrypython-audio-separatorBS-RoFormerHT Demucsfacebookresearch/demucsHT Demucs paper

BS-RoFormer SW Fixed 6-stem

BS-RoFormer SW Fixed использует BS-Rofo-SW-Fixed.ckpt плюс BS-Rofo-SW-Fixed.yaml для разделения полного микса на six WAV stems.

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

Аудиовыход: vocals, drums, bass, guitar, piano и other WAV stems.
Полезно для обзора аранжировки, практического материала, подготовки ремиксов и превращения микс-композиции в отдельные stem файлы.

Сравнение моделей

Модель

Роль

Почему он используется

Влияние на выход

МодельBS-RoFormer SW Fixed 6-stem

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

РольBS-RoFormer SW Исправлен six-stem аудиосепаратор

Почему он используетсяВыбрано потому, что BS-RoFormer SW Fixed 6-stem выпускает vocals, drums, bass, guitar, piano и другие, с публичными ссылками на MVSep и BS-RoFormer.

Влияние на выходШесть WAV stems

МодельHT Demucs

facebookresearch/demucs HT Demucs paper

РольБазовый уровень разделения / запасной вариант

Почему он используетсяHT Demucs — это сильный источник с открытым исходным кодом; Этот инструмент использует BS-RoFormer SW Fixed 6-stem, потому что напрямую нацеливается на шесть отображаемых stems.

Влияние на выходКонтекст или запасной stems

Эталонный график: MVSep BS-RoFormer SW Исправленные six-stem данные / MVSep piano-stem валидационные строки / MVSep guitar-stem строки валидации

Область открытых локально развёртываемых моделей: в таблицы входят только строки с проверенными загружаемыми весами или конфигурациями и способом локального запуска. SOTA и «Лучший» относятся лишь к показанным проверенным строкам, не включают облачные, только API или коммерческие системы и не являются универсальным рейтингом.

MVSep BS-RoFormer SW Исправленные six-stem данные

MVSep Multisong entry 8374

Это сохраняет ряд BS-RoFormer SW Fixed 6-stem для развертывания рядом с общественным htdemucs_6s базовым уровнем. Рядом ряды Test, RA, Logic и UVR — это варианты или тестовые запуски, а не модель инструмента.

Бумажные и эталонные заметки	Модель	Вокал СДР (dB)	Подробные метрики
MVSep entry 8374	BS-RoFormer SW Fixed 6-stemTelkNetMVSep entry 8374 Этот инструмент использует BS-RoFormer SW Fixed для vocals, drums, bass, guitar, piano и других.	11.3019	Инструментальные СДР (dB)17.5091Бас СДР (dB)14.6235Барабаны СДР (dB)14.1129Гитара СДР (dB)9.0500Фортепиано СДР (dB)7.8300Другие СДР (dB)8.7169

MVSep piano-stem валидационные строки

MVSep Piano scores

MVSep публикует отдельные строки валидации piano-stem для six-stem сепараторов. Эти строки объясняют, почему для piano вывода используется текущая модель BS-RoFormer SW Fix.

Звание	Модель	Фортепиано СДР (dB)	Подробные метрики
MVSep entry 9578	BS-RoFormer SW FixedTelkNetMVSep entry 9578	7.8031SOTA	Другие СДР (dB)19.5824Лучший
MVSep entry 7396	Ensemble (SCNet + Mel)MVSep entry 7396	6.2054	Другие СДР (dB)18.4851
MVSep entry 7395	SCNet Large (2024.09)MVSep entry 7395	5.8912	Другие СДР (dB)18.1698
MVSep entry 7394	MelRoformer (viperx)MVSep entry 7394	5.7118	Другие СДР (dB)17.9917
MVSep entry 7392	mdx23c (2024.09)MVSep entry 7392	5.5996	Другие СДР (dB)17.8796
MVSep entry 7390	mdx23c (2023.08)MVSep entry 7390	4.7969	Другие СДР (dB)17.0766

MVSep guitar-stem строки валидации

MVSep Guitar scores

MVSep публикует отдельные guitar-stem валидационные строки для six-stem сепараторов. Эти строки предоставляют развёртываемый контекст модели, отсутствующий в одной six-stem таблицы лидеров.

Звание	Модель	Гитара СДР (dB)	Подробные метрики
MVSep entry 9245	BS-RoFormer SW FixedTelkNetMVSep entry 9245	9.0120SOTA	Другие СДР (dB)15.9828Лучший
MVSep entry 7149	Ensemble (BSRoformer + MelRoformer)MVSep entry 7149	7.5112	Другие СДР (dB)14.4820
MVSep entry 6741	Ensemble (mdx23 + MelRoformer)MVSep entry 6741	7.1835	Другие СДР (dB)14.1542
MVSep entry 6776	BSRoformer (viperx)MVSep entry 6776	7.1266	Другие СДР (dB)13.9775
MVSep entry 6720	MelRoformer (2024.06)MVSep entry 6720	7.0211	Другие СДР (dB)13.9919
MVSep entry 6740	mdx23c (2024.06)MVSep entry 6740	6.3422	Другие СДР (dB)13.3130

Бумажные и эталонные заметки

Music Source Separation with Band-Split RoPE Transformer

SDX23 music separation track - 2023

BS-RoFormer использует функции спектрограммы с разделением полос и трансформаторы RoPE; система SDX23 заняла первое место по дорожке разделения музыкальных источников, а меньшая версия показала средний SDR 9,80 дБ на MUSDB18HQ.

arXiv:2309.02612

Hybrid Transformers for Music Source Separation

ICASSP - 2023

HT Demucs заменяет основные слои Demucs на cross-domain Transformer attention и сообщает о 9,20 дБ SDR с дополнительными данными и тонкой настройкой.

arXiv:2211.08553

Официальные / хранилища

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator

Статьи / технические заметки

BS-RoFormer

Руководство по параметрам

Модель: BS-RoFormer SW Fixed 6-stem (BS-Rofo-SW-Fixed.ckpt).
Аудиовыходы: vocals, drums, bass, guitar, piano и other WAV stems.
Опции модели: публичный MVSep алгоритм указывает эту запись как sep_type=63. TelkNet выполняет локальные BS-RoFormer веса SW, а не внешний MVSep API. У него нет add_opt управления, поэтому инструмент использует официальную стандартную конфигурацию качества.

Сценарии использования

Извлечь только выбранный инструмент
Удалить одну цель, сохранив остальной микс
Подготовить материал для практики, аккомпанемента, ремикса или сэмплирования

Рабочий процесс

1Загрузите музыку и выберите стем
2Выберите Извлечь или Удалить; вокал использует специальный путь, остальные цели — шестистемный
3Прослушайте, скачайте или верните результат в видео

Предполётный чек-лист

Для вокала используется специальный вокальный путь
При сильном наложении инструментов возможны утечки
Перед большим пакетом проверьте показательный фрагмент

Образцовые доказательства в этом забеге

Модели, параметры и источники

Разделение шести стеблей делит смесь на six WAV stems: vocals, drums, bass, guitar, piano и другие.

BS-RoFormer SW Fixed 6-stem

Модель

BS-Rofo-SW-Fixed.ckpt + YAML

BS-RoFormer SW Fixed использует BS-Rofo-SW-Fixed.ckpt плюс BS-Rofo-SW-Fixed.yaml для разделения полного микса на six WAV stems.

Аудиовыход: vocals, drums, bass, guitar, piano и other WAV stems.
Полезно для обзора аранжировки, практического материала, подготовки ремиксов и превращения микс-композиции в отдельные stem файлы.

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

Сравнение моделей

BS-RoFormer SW Fixed 6-stem

BS-RoFormer SW Исправлен six-stem аудиосепаратор

Выбрано потому, что BS-RoFormer SW Fixed 6-stem выпускает vocals, drums, bass, guitar, piano и другие, с публичными ссылками на MVSep и BS-RoFormer.

Шесть WAV stems

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

HT Demucs

Базовый уровень разделения / запасной вариант

HT Demucs — это сильный источник с открытым исходным кодом; Этот инструмент использует BS-RoFormer SW Fixed 6-stem, потому что напрямую нацеливается на шесть отображаемых stems.

Контекст или запасной stems

facebookresearch/demucs HT Demucs paper

Руководство по параметрам

Модель: BS-RoFormer SW Fixed 6-stem (BS-Rofo-SW-Fixed.ckpt).
Аудиовыходы: vocals, drums, bass, guitar, piano и other WAV stems.
Опции модели: публичный MVSep алгоритм указывает эту запись как sep_type=63. TelkNet выполняет локальные BS-RoFormer веса SW, а не внешний MVSep API. У него нет add_opt управления, поэтому инструмент использует официальную стандартную конфигурацию качества.

Статьи / технические заметки

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

Вход

TelkNet QA — batch-a

Демо

2 аудиодорожки

TelkNet QA — batch-a

Один целевой стем либо микс без выбранного источника.

0:00 / 0:30

Гитара

0.0 dB

0.00s

vocals

0.0 dB

0.00s

0:000:050:100:150:200:250:30

На техническом обслуживании

Этот инструмент находится на техническом обслуживании. Пожалуйста, попробуйте позже.

Быстрый отзыв

Напишите здесь своё предложение или пожелание и отправьте. Мы внимательно слушаем каждый голос и стараемся воплощать хорошие идеи в реальные функции.