Загрузка...

Разделение и stem разделениеGPU нагрузкаSeparate-and-detect · Исходный код Separate-and-Detect · Веса vae-ckpt.ckpt · Веса hifigan-ckpt.ckpt · Веса vgg16-397923af.pth · Веса vgg.pth · Веса 955717e8-8726e21a.th · Веса madmom_models · Веса MSG-LD · OB · Статья

Разделение ударных

Разделите запись ударных на редактируемые дорожки с DrumSep, IDM или MSG-LD, сравните инструменты и форматы, прослушайте результат и скачайте WAV.

35 кредиты/использованиеВвод файловМаксимум 100 MBОценка 20-1800 секунд

Вход

Поддерживает вводные данные в форматах, таких как mp3 / wav / flac / ogg / m4a / aac / aif / aiff / mp4 / mov / mkv

Поддерживаемые форматы

mp3wavflacoggm4aaacaifaiffmp4movmkv

Результаты

5 × WAV · MIDI · CSV

Сценарий использования

Разделение ударных на отдельные дорожки с IDM или MSG-LD.

Выберите семейство моделей

Ударные: 5/6 дорожек · MDX23C DrumSepДоступноУдарные в пять или шесть дорожек; шесть разделяют ride и crash.Ударные: 9 дорожек · IDMДоступноIDM экспортирует девять дорожек ударных без MIDI.Ударные: 5 дорожек · MSG-LDДоступноПять классов ударных и обнаружение ударов; разные вспомогательные ветви обучения.

Выберите версию или режим обработки

Разделение ударных · MSG-LD · OBTBОбучена с ветвями атак и тембра; создаёт пять дорожек ударных и определяет удары.РекомендуетсяДоступноРазделение ударных · MSG-LD · OBОбучена с вспомогательной ветвью атак; создаёт пять дорожек ударных и определяет удары.Доступно

Выберите модель под ваш материал и задачу и посмотрите примеры перед отправкой.

Стоимость, время, форматы и параметры зависят от выбранной модели.

Разделяет партии ударных и определяет моменты ударов. MIDI velocity фиксирована на 100, длительность каждого события — 0.1 секунды; длина полного WAV не меняется.

Модели, параметры и источники

MSG-LD создаёт пять дорожек ударных и определяет начала ударов; в MIDI сила удара равна 100, длительность воспроизведения — 0,1 секунды.

MDX23C DrumSep · 5 stemsPinned MSST pretrained-model tableMDX23C DrumSep · 6 stemsA Semantically Consistent Dataset for Data-Efficient Query-Based Universal Sound SeparationDrumSepdrum kit separationkick snare toms cymbalsBS-RoFormer SW Fixedtwo-stage drum separationfull mix drum extractionisolated drum stem splitterdrum stem separation

MDX23C DrumSep · 5 stems

MDX23C DrumSep · 5 stems: Ремикширование барабанов, замена, временное редактирование, тренировочные треки и анализ, ориентированный на ударные.

Official 5-stem checkpoint Official 5-stem config Pinned immutable mirror used by TelkNet

MDX23C DrumSep · 6 stems

MDX23C DrumSep · 6 stems: Ремикширование барабанов, замена, временное редактирование, тренировочные треки и анализ, ориентированный на ударные.

Official 6-stem checkpoint Official 6-stem config Pinned checkpoint bytes used by TelkNet

IDM

IDM экспортирует девять дорожек ударных без MIDI.

bernardo-torres/inverse-drum-machine IDM · checkpoint ddman1101/Separate-and-detect MSG-LD · checkpoint IDM

wiener использует официальную маску Wiener; none отключает маскирование.
Показатель степени маски Wiener; официальное значение 1.
Полный микс сначала проходит выделение ударных в выбранном процессе. Отдельная дорожка ударных передаётся непосредственно выбранной модели транскрипции или разделения.
IDM выдаёт девять барабанных дорожек WAV. nSDR, LSD и PES оценивают разделение аудио, а не MIDI-транскрипцию, и не ранжируются вместе с FAD модели MSG-LD.

MSG-LD · OBTB

ddman1101/Separate-and-detect MSG-LD · checkpoint MSG-LD

msgld_ob использует ветвь атак; msgld_obtb — ветви атак и тембра.
Число шагов DDIM, по умолчанию 200. Можно использовать 50, 100, 200, 250 или 500; некоторые другие значения не поддерживаются.
Полный микс сначала проходит выделение ударных в выбранном процессе. Отдельная дорожка ударных передаётся непосредственно выбранной модели транскрипции или разделения.
Статья оценивает OB, TB и OBTB отдельно; результаты OB не относятся к OBTB по умолчанию. F1 нот и аудиометрики mel-MSE/FAD показаны раздельно. Цепочка детекции из статьи здесь повторно не измерялась.

MSG-LD · OB

ddman1101/Separate-and-detect MSG-LD · checkpoint MSG-LD

msgld_ob использует ветвь атак; msgld_obtb — ветви атак и тембра.
Число шагов DDIM, по умолчанию 200. Можно использовать 50, 100, 200, 250 или 500; некоторые другие значения не поддерживаются.
Полный микс сначала проходит выделение ударных в выбранном процессе. Отдельная дорожка ударных передаётся непосредственно выбранной модели транскрипции или разделения.
Статья оценивает OB, TB и OBTB отдельно; результаты OB не относятся к OBTB по умолчанию. F1 нот и аудиометрики mel-MSE/FAD показаны раздельно. Цепочка детекции из статьи здесь повторно не измерялась.

Бумажные и эталонные заметки

A Semantically Consistent Dataset for Data-Efficient Query-Based Universal Sound Separation

ICML - 2026

Извлекает свободно описанный звук с помощью AudioSep-Hive, FlowSep-Hive или CLAPSep либо выделяет в Banquet источник, совпадающий с 10-секундным эталоном.

arXiv:2601.22599

The Inverse Drum Machine: Source Separation Through Joint Transcription and Analysis-by-Synthesis

arXiv - 2025

IDM экспортирует девять дорожек ударных без MIDI.

IDM

Separate-and-Detect: Unified Drum Transcription and Stem Generation via Latent Diffusion

arXiv - 2026

MSG-LD

Официальные / хранилища

Official 5-stem checkpoint Official 5-stem config Pinned immutable mirror used by TelkNet Official 6-stem checkpoint Official 6-stem config Pinned checkpoint bytes used by TelkNet bernardo-torres/inverse-drum-machine IDM · checkpoint ddman1101/Separate-and-detect MSG-LD · checkpoint

Статьи / технические заметки

IDM MSG-LD

Руководство по параметрам

wiener использует официальную маску Wiener; none отключает маскирование.
Показатель степени маски Wiener; официальное значение 1.
Полный микс сначала проходит выделение ударных в выбранном процессе. Отдельная дорожка ударных передаётся непосредственно выбранной модели транскрипции или разделения.
msgld_ob использует ветвь атак; msgld_obtb — ветви атак и тембра.
Число шагов DDIM, по умолчанию 200. Можно использовать 50, 100, 200, 250 или 500; некоторые другие значения не поддерживаются.

Рабочий процесс

1Полный микс сначала проходит выделение ударных в выбранном процессе. Отдельная дорожка ударных передаётся непосредственно выбранной модели транскрипции или разделения.
2Выберите IDM или MSG-LD и отправьте запись, затем прослушайте и скачайте дорожки WAV; MSG-LD также выдаёт моменты ударов в CSV и MIDI.

Что проверить

IDM выделяет девять классов ударных, MSG-LD — пять; MIDI содержит моменты ударов, а не мелодические высоты.

Модели в этой области

Категорий выхода: 5

Показаны только записи с проверенной публичной реализацией инференса и соответствующими весами, а также алгоритмы без обученных весов. Закрытые сервисы, неопубликованные веса и неподтверждённые версии экспериментов исключены. Это не общий рейтинг всех моделей.

Опубликованные условия оценки

Каждый набор весов указан один раз в каждом тесте с лучшим опубликованным результатом по выбранной метрике. Общая оценка взята из одного испытания. Разверните список, чтобы сравнить испытания и настройки.

Публичные веса не подтверждают полноценную лицензию с открытым исходным кодом. Разверните данные для просмотра заявленных лицензий весов и условий доступа. Отсутствие лицензии отмечено отдельно.

Отметки обозначают используемые на сайте модели или компоненты. Оценки и параметры взяты из указанных тестов, а не из новой проверки всей цепочки обработки сайта.

Тест

MSG-LD · Table 1

Выберите набор данных, чтобы увидеть все метрики каждой модели. Строки упорядочены по официальному месту или выбранной метрике. Жирным выделено лучшее сопоставимое значение каждого столбца, включая равные результаты. Разные протоколы оценки ранжируются отдельно; отсутствующие оценки обозначены -.

Развёртываемых 2 / исходных строк 5

Вне рейтинга: 3

Для этих экспериментов не проверен полный открытый пакет инференса. Другие веса модели с тем же именем не подходят.

LarsNet · MSG-LD Vanilla · MSG-LD TB

Статья оценивает OB, TB и OBTB отдельно; результаты OB не относятся к OBTB по умолчанию. F1 нот и аудиометрики mel-MSE/FAD показаны раздельно. Цепочка детекции из статьи здесь повторно не измерялась.

Ранжировать по метрике

MSG-LD · Table 1
Место по метрике	Модель	Kick↑	Snare↑	Toms↑	Hi-Hats↑	Cymbals↑	Overall↑
1	MSG-LD OBTB Открытые веса · Код инференса Код инференса Лицензия весов (заявление репозитория): mit	0.78	1.42	1.41	4.30	3.52	2.29
2	MSG-LD OBМодель на сайте Открытые веса · Код инференса Код инференса Лицензия весов (заявление репозитория): mit	1.03	1.33	1.45	3.46	1.92	2.12

Исходные записи (2)

MSG-LD · Table 1 ↗Проверено: 2026-10-25

Все источники оценок (6)

Наборы данных, версии и условия разделены; сохраняются и источники без допущенных строк.

MVSEP · Компоненты ударных (DrumSep) ↗
Развёртываемых 2 / исходных строк 15 · Проверено: 2026-10-25
Вне рейтинга: 13
Для этих экспериментов не проверен полный открытый пакет инференса. Другие веса модели с тем же именем не подходят.
DrumSep Mel Band Roformer v2 (4 stems) · BS Roformer DrumSep (small by jarredou) · DrumSep SCNet XL (5 stems) · DrumSep SCNet XL (6 stems) · DrumSep SCNet XL (4 stems) · DrumSep Mel Band Roformer (6 stems) · DrumSep Mel Band Roformer (4 stems) · MDX23XC Drumsep 5 stems (jarredou) · DTTNET+Mixer test · DrumSep model by aufr33 and jarredou (MDX23C, 6 stems) · Spectralayers 12.0 drumsep model · DrumSep model by inagoy (HDemucs, 4 stems)
IDM · Table III ↗
Развёртываемых 1 / исходных строк 1
MSG-LD · Table 1 ↗
Развёртываемых 2 / исходных строк 5
Вне рейтинга: 3
Для этих экспериментов не проверен полный открытый пакет инференса. Другие веса модели с тем же именем не подходят.
LarsNet · MSG-LD Vanilla · MSG-LD TB
MSG-LD · Table 2 ↗
Развёртываемых 2 / исходных строк 5
Вне рейтинга: 3
Для этих экспериментов не проверен полный открытый пакет инференса. Другие веса модели с тем же именем не подходят.
LarsNet · MSG-LD Vanilla · MSG-LD TB
MSG-LD · Table 3 ↗
Развёртываемых 2 / исходных строк 3
Вне рейтинга: 1
Для этих экспериментов не проверен полный открытый пакет инференса. Другие веса модели с тем же именем не подходят.
LarsNet
MSG-LD · Table 4 ↗
Развёртываемых 2 / исходных строк 4
Вне рейтинга: 2
Для этих экспериментов не проверен полный открытый пакет инференса. Другие веса модели с тем же именем не подходят.
MSG-LD Vanilla · MSG-LD TB

Все исходные результаты и источники

Оценки относятся к указанным данным, метрике и версии модели. Результаты разных тестов нельзя сравнивать напрямую.

IDM · Table III

Развёртываемых 1 / исходных строк 1

IDM выдаёт девять барабанных дорожек WAV. nSDR, LSD и PES оценивают разделение аудио, а не MIDI-транскрипцию, и не ранжируются вместе с FAD модели MSG-LD.

Ранжировать по метрике

IDM · Table III
Место по метрике	Модель	kick · Masked			kick · Synthesized		snare · Masked			snare · Synthesized		hihat_closed · Masked			hihat_closed · Synthesized		hihat_open · Masked			hihat_open · Synthesized		hi_tom · Masked			hi_tom · Synthesized		mid_tom · Masked			mid_tom · Synthesized		low_tom · Masked			low_tom · Synthesized		ride · Masked			ride · Synthesized		crash_left · Masked			crash_left · Synthesized
Место по метрике	Модель	nSDR ↑	LSD ↓	PES ↓	LSD ↓	PES ↓	nSDR ↑	LSD ↓	PES ↓	LSD ↓	PES ↓	nSDR ↑	LSD ↓	PES ↓	LSD ↓	PES ↓	nSDR ↑	LSD ↓	PES ↓	LSD ↓	PES ↓	nSDR ↑	LSD ↓	PES ↓	LSD ↓	PES ↓	nSDR ↑	LSD ↓	PES ↓	LSD ↓	PES ↓	nSDR ↑	LSD ↓	PES ↓	LSD ↓	PES ↓	nSDR ↑	LSD ↓	PES ↓	LSD ↓	PES ↓	nSDR ↑	LSD ↓	PES ↓	LSD ↓	PES ↓
-	IDM Открытые веса · Код инференса Код инференсаЛицензия весов не указана	17.47	2.58	− 54.37	1.84	− 55.46	17.29	1.73	− 57.20	1.83	− 58.87	1.66	1.90	− 55.88	1.94	− 56.83	6.68	1.71	− 59.81	1.86	− 59.99	8.50	1.16	− 59.57	1.03	− 59.85	6.41	1.11	− 59.62	0.90	− 59.70	7.35	1.62	− 59.30	1.32	− 59.57	2.12	2.09	− 59.57	2.24	− 59.65	4.78	2.84	− 59.88	2.99	− 59.94

Исходные записи (1)

IDM · Table III ↗Проверено: 2026-10-25

MSG-LD · Table 1

Развёртываемых 2 / исходных строк 5

Вне рейтинга: 3

LarsNet · MSG-LD Vanilla · MSG-LD TB

Ранжировать по метрике

MSG-LD · Table 1
Место по метрике	Модель	Kick↑	Snare↑	Toms↑	Hi-Hats↑	Cymbals↑	Overall↑
1	MSG-LD OBTB Открытые веса · Код инференса Код инференса Лицензия весов (заявление репозитория): mit	0.78	1.42	1.41	4.30	3.52	2.29
2	MSG-LD OB Открытые веса · Код инференса Код инференса Лицензия весов (заявление репозитория): mit	1.03	1.33	1.45	3.46	1.92	2.12

Исходные записи (2)

MSG-LD · Table 1 ↗Проверено: 2026-10-25

MSG-LD · Table 2

Развёртываемых 2 / исходных строк 5

Вне рейтинга: 3

LarsNet · MSG-LD Vanilla · MSG-LD TB

Ранжировать по метрике

MSG-LD · Table 2
Место по метрике	Модель	Kick↑	Snare↑	Toms↑	Hi-Hats↑	Cymbals↑	Mean↑
1	MSG-LD OBTB Открытые веса · Код инференса Код инференса Лицензия весов (заявление репозитория): mit	0.23	0.09	0.13	0.48	0.82	0.35
2	MSG-LD OB Открытые веса · Код инференса Код инференса Лицензия весов (заявление репозитория): mit	0.32	0.10	0.16	0.38	0.71	0.33

Исходные записи (2)

MSG-LD · Table 2 ↗Проверено: 2026-10-25

MSG-LD · Table 3

Развёртываемых 2 / исходных строк 3

Вне рейтинга: 1

LarsNet

Ранжировать по метрике

MSG-LD · Table 3
Место по метрике	Модель	MDB · Kick			MDB · Snare			MDB · Toms			MDB · Hi-Hats			MDB · Cymbals			MDB · Overall			ENST · Kick			ENST · Snare			ENST · Toms			ENST · Hi-Hats			ENST · Cymbals			ENST · Overall
Место по метрике	Модель	F1↑	P↑	R↑	F1↑	P↑	R↑	F1↑	P↑	R↑	F1↑	P↑	R↑	F1↑	P↑	R↑	F1↑	P↑	R↑	F1↑	P↑	R↑	F1↑	P↑	R↑	F1↑	P↑	R↑	F1↑	P↑	R↑	F1↑	P↑	R↑	F1↑	P↑	R↑
1	ADTOF Открытые веса · Код инференса Frame_RNN_adtofAll_0.data-00000-of-00001 + .index Код инференса Лицензия весов (заявление репозитория): CC-BY-NC-SA-4.0	0.851	0.790	0.923	0.752	0.828	0.690	0.520	0.520	0.520	0.773	0.859	0.703	0.849	0.802	0.902	0.795	0.813	0.778	0.795	0.984	0.667	0.599	0.932	0.441	0.581	0.669	0.513	0.777	0.936	0.663	0.657	0.788	0.563	0.709	0.908	0.582
2	MSG-LD OB Открытые веса · Код инференса Код инференса Лицензия весов (заявление репозитория): mit	0.931	0.939	0.923	0.760	0.791	0.732	0.268	0.309	0.236	0.650	0.550	0.794	0.481	0.663	0.377	0.707	0.709	0.704	0.821	0.941	0.729	0.642	0.698	0.594	0.491	0.415	0.602	0.630	0.643	0.618	0.391	0.611	0.287	0.640	0.695	0.593

Исходные записи (2)

MSG-LD · Table 3 ↗Проверено: 2026-10-25

MSG-LD · Table 4

Развёртываемых 2 / исходных строк 4

Вне рейтинга: 2

MSG-LD Vanilla · MSG-LD TB

Ранжировать по метрике

MSG-LD · Table 4
Место по метрике	Модель	MDB Overall			ENST Overall			Mean overall F1 (2 sets)
Место по метрике	Модель	F1↑	P↑	R↑	F1↑	P↑	R↑	F1↑	P↑	R↑
1	MSG-LD OB Открытые веса · Код инференса Код инференса Лицензия весов (заявление репозитория): mit	0.707	0.709	0.704	0.640	0.695	0.593	0.674	0.674	0.674
2	MSG-LD OBTB Открытые веса · Код инференса Код инференса Лицензия весов (заявление репозитория): mit	0.690	0.709	0.672	0.636	0.703	0.580	0.663	0.663	0.663

Исходные записи (2)

MSG-LD · Table 4 ↗Проверено: 2026-10-25

Разделение ударных

Модели, параметры и источники

MDX23C DrumSep · 5 stems

MDX23C DrumSep · 6 stems

IDM

MSG-LD · OBTB

MSG-LD · OB

Бумажные и эталонные заметки

A Semantically Consistent Dataset for Data-Efficient Query-Based Universal Sound Separation

The Inverse Drum Machine: Source Separation Through Joint Transcription and Analysis-by-Synthesis

Separate-and-Detect: Unified Drum Transcription and Stem Generation via Latent Diffusion

Официальные / хранилища

Статьи / технические заметки

Руководство по параметрам

Рабочий процесс

Что проверить

MSG-LD · Table 1

IDM · Table III

MSG-LD · Table 1

MSG-LD · Table 2

MSG-LD · Table 3

MSG-LD · Table 4

Быстрый отзыв