Iterative Audio Separation with Mixture Consistency via MIMO Model Extension
arXiv - 2026
Фиксированная версия README Sony: MUSDB18-HQ, медиана медиан museval. Сравнивайте только внутри этого протокола, отдельно от MVSEP и других статей.
Загрузка...
Разделяйте основной вокал, гармонии и аккомпанемент или получайте сухой вокал для каверов и караоке.
Вход
Поддерживает вводные данные в форматах, таких как mp3 / wav / flac / ogg / m4a / aac / aif / aiff / mp4 / mov / mkv
Поддерживаемые форматы
Результаты
2 × WAV
Сценарий использования
Sony MIMO BS-RoFormer разделяет вокал и аккомпанемент за три итерации; доступны Large и Small. В сложном миксе возможны утечки. Сравнения с Leap сайта в одинаковых условиях нет.
Выберите модель под ваш материал и задачу и посмотрите примеры перед отправкой.
Стоимость, время, форматы и параметры зависят от выбранной модели.
В отзыве укажите инструмент, последовательность действий и проблему. Скриншоты помогут её найти.
Sony MIMO BS-RoFormer разделяет вокал и аккомпанемент; доступны версии Large и Small. В сложных миксах возможны остатки других партий.
Обёртка для UVR/MVSep типа сепаратор checkpoints. Он обеспечивает загрузку моделей, экспорт WAV stem и обработку аудиоформатов с поддержкой FFmpeg, используемых этим инструментом.
Разделение гармонии: MVSep 9205 обеспечивает лид-партию/аккомпанемент с гармонией, BS-RoFormer ленты Leap XE 90 обеспечивают vocals гармонию, а BS-RoFormer Leap Instrumental группы — сопровождение.
Извлечение сухого вокала: Leap XE 90 bands даёт ведущий вокал, BS-RoFormer Leap Instrumental референс аккомпанемента, MVSep 9205 BS-Kar AVG убирает фоновые гармонии, а модель dereverb anvuew BS-RoFormer удаляет реверберацию.
MelBand Aspiration отделяет дыхание и воздушные призвуки от остального звука; доступны обычная и мягкая версии. Могут выделяться и фрикативные согласные. Используйте отдельный вокал и проверяйте дикцию.
MelBand Aspiration отделяет дыхание и воздушные призвуки от остального звука; доступны обычная и мягкая версии. Могут выделяться и фрикативные согласные. Используйте отдельный вокал и проверяйте дикцию.
arXiv - 2026
Фиксированная версия README Sony: MUSDB18-HQ, медиана медиан museval. Сравнивайте только внутри этого протокола, отдельно от MVSEP и других статей.
SDX23 music separation track - 2023
BS-RoFormer использует функции спектрограммы с разделением полос и трансформаторы RoPE; система SDX23 заняла первое место по дорожке разделения музыкальных источников, а меньшая версия показала средний SDR 9,80 дБ на MUSDB18HQ.
TISMIR - 2024
Бумага для демикширования музыки SDX23 содержит надёжные тесты MSS, тесты на прослушение и показывает, что лучшая система улучшилась по сравнению с предыдущим вызовом более чем на 1,6 дБ SDR MDXDB21.
arXiv / ISMIR late-breaking demo - 2023
Mel-RoFormer заменяет эвристические неперекрывающиеся полосы на перекрывающиеся мел-диапазоны и показывает лучшее разделение, чем BS-RoFormer для vocals, drums и других stems на MUSDB18HQ.
Категорий выхода: 2
Показаны только записи с проверенной публичной реализацией инференса и соответствующими весами, а также алгоритмы без обученных весов. Закрытые сервисы, неопубликованные веса и неподтверждённые версии экспериментов исключены. Это не общий рейтинг всех моделей.
Каждый набор весов указан один раз в каждом тесте с лучшим опубликованным результатом по выбранной метрике. Общая оценка взята из одного испытания. Разверните список, чтобы сравнить испытания и настройки.
Публичные веса не подтверждают полноценную лицензию с открытым исходным кодом. Разверните данные для просмотра заявленных лицензий весов и условий доступа. Отсутствие лицензии отмечено отдельно.
Отметки обозначают используемые на сайте модели или компоненты. Оценки и параметры взяты из указанных тестов, а не из новой проверки всей цепочки обработки сайта.
Выберите набор данных, чтобы увидеть все метрики каждой модели. Строки упорядочены по официальному месту или выбранной метрике. Жирным выделено лучшее сопоставимое значение каждого столбца, включая равные результаты. Разные протоколы оценки ранжируются отдельно; отсутствующие оценки обозначены -.
Развёртываемых 4 / исходных строк 4
Фиксированная версия README Sony: MUSDB18-HQ, медиана медиан museval. Сравнивайте только внутри этого протокола, отдельно от MVSEP и других статей.
| Место по метрике | Модель | Условия теста | Params | Input length | Batch Size | Training Steps | museval SDR · (Vocals / Accomp) | Download |
|---|---|---|---|---|---|---|---|---|
| - | Sony BS-RoFormer Small baselineОткрытые веса · Код инференса | Small | 12.1 M | 4 sec | 96 | 1,000,000 | 9.64 / 16.80 | Download |
| - | Sony MIMO BS-RoFormer SmallОткрытые веса · Код инференса | Small | 16.3 M | 4 sec | 96 | 1,000,000 | 10.17 / 17.64 | Download |
| - | Sony BS-RoFormer Large baselineОткрытые веса · Код инференса | Large | 72.2 M | 8 sec | 96 | 1,000,000 | 11.40 / 18.48 | Download |
| - | Sony MIMO BS-RoFormer LargeМодель на сайтеОткрытые веса · Код инференса | Large | 71.4 M | 8 sec | 96 | 1,000,000 | 11.62 / 19.04 | Download |
Отметки обозначают используемые на сайте модели или компоненты. Оценки и параметры взяты из указанных тестов, а не из новой проверки всей цепочки обработки сайта.
Наборы данных, версии и условия разделены; сохраняются и источники без допущенных строк.
Развёртываемых 4 / исходных строк 4
Оценки относятся к указанным данным, метрике и версии модели. Результаты разных тестов нельзя сравнивать напрямую.
В таблице указаны только модели с открытыми весами или конфигурациями, которые можно запустить локально.
Выберите набор данных, чтобы увидеть все метрики каждой модели. Строки упорядочены по официальному месту или выбранной метрике. Жирным выделено лучшее сопоставимое значение каждого столбца, включая равные результаты. Разные протоколы оценки ранжируются отдельно; отсутствующие оценки обозначены -.
Развёртываемых 4 / исходных строк 4
Фиксированная версия README Sony: MUSDB18-HQ, медиана медиан museval. Сравнивайте только внутри этого протокола, отдельно от MVSEP и других статей.
| Место по метрике | Модель | Условия теста | Params | Input length | Batch Size | Training Steps | museval SDR · (Vocals / Accomp) | Download |
|---|---|---|---|---|---|---|---|---|
| - | Sony BS-RoFormer Small baselineОткрытые веса · Код инференса | Small | 12.1 M | 4 sec | 96 | 1,000,000 | 9.64 / 16.80 | Download |
| - | Sony MIMO BS-RoFormer SmallОткрытые веса · Код инференса | Small | 16.3 M | 4 sec | 96 | 1,000,000 | 10.17 / 17.64 | Download |
| - | Sony BS-RoFormer Large baselineОткрытые веса · Код инференса | Large | 72.2 M | 8 sec | 96 | 1,000,000 | 11.40 / 18.48 | Download |
| - | Sony MIMO BS-RoFormer LargeОткрытые веса · Код инференса | Large | 71.4 M | 8 sec | 96 | 1,000,000 | 11.62 / 19.04 | Download |