Загрузка...

Ударные в MIDI · MSG-LD / ADTOF · TelkNet

MIDI / транскрипцияGPU нагрузкаSeparate-and-detect · Исходный код Separate-and-Detect · Веса vae-ckpt.ckpt · Веса hifigan-ckpt.ckpt · Веса vgg16-397923af.pth · Веса vgg.pth · Веса 955717e8-8726e21a.th · Веса madmom_models · Веса MSG-LD · OB · Статья

Ударные в MIDI

ADTOF Plus · ADTOF Direct · ADT_STR · MSG-LD. Полный микс сначала проходит выделение ударных в выбранном процессе. Отдельная дорожка ударных передаётся непосредственно выбранной модели транскрипции или разделения.

15 кредиты/использованиеВвод файловМаксимум 100 MBОценка 20-1800 секунд

Вход

Поддерживает вводные данные в форматах, таких как mp3 / wav / flac / ogg / m4a / aac / aif / aiff / mp4 / mov / mkv

Поддерживаемые форматы

mp3wavflacoggm4aaacaifaiffmp4movmkv

Результаты

5 × WAV · MIDI · CSV

Сценарий использования

Редактирование нот, инструментовки и деталей исполнения.

Выберите семейство моделей

Ударные в MIDI · MSG-LDДоступноРазделение ударных и поиск атак для черновика MIDI; динамика и длительность воспроизведения фиксированы.Ударные в MIDI · ADTOFДоступноУдарные в MIDI: Plus добавляет динамику и открытый/закрытый хай-хэт; Direct — прямую транскрипцию.Ударные в MIDI · ADT_STRДоступноНачала нот и динамика 26 классов ударных; три τ соответствуют разному обучению.

Выберите версию или режим обработки

Ударные в MIDI · MSG-LD · OBОбучена с вспомогательной ветвью атак; создаёт пять дорожек ударных и определяет удары.РекомендуетсяДоступноУдарные в MIDI · MSG-LD · OBTBОбучена с ветвями атак и тембра; создаёт пять дорожек ударных и определяет удары.Доступно

Выберите модель под ваш материал и задачу и посмотрите примеры перед отправкой.

Стоимость, время, форматы и параметры зависят от выбранной модели.

Разделяет партии ударных и определяет моменты ударов. MIDI velocity фиксирована на 100, длительность каждого события — 0.1 секунды; длина полного WAV не меняется.

Быстрый отзыв

В отзыве укажите инструмент, последовательность действий и проблему. Скриншоты помогут её найти.

Модели, параметры и источники

MSG-LD создаёт пять дорожек ударных и определяет начала ударов; в MIDI сила удара равна 100, длительность воспроизведения — 0,1 секунды.

MSG-LD · OBADTOF-PyTorch READMEADTOF (original)ADTOF Direct · PyTorchADTOF Plus paper, Table 1ADTOF PlusOriginal ADTOFADTOF Plus paper, Table 2Vogl et al. 8-class baselineADT-STR · Table 2ADT-STR Setting-1ADT-STR Setting-2

MSG-LD · OB

ddman1101/Separate-and-detect MSG-LD · checkpoint MSG-LD

msgld_ob использует ветвь атак; msgld_obtb — ветви атак и тембра.
Число шагов DDIM, по умолчанию 200. Можно использовать 50, 100, 200, 250 или 500; некоторые другие значения не поддерживаются.
Полный микс сначала проходит выделение ударных в выбранном процессе. Отдельная дорожка ударных передаётся непосредственно выбранной модели транскрипции или разделения.
Статья оценивает OB, TB и OBTB отдельно; результаты OB не относятся к OBTB по умолчанию. F1 нот и аудиометрики mel-MSE/FAD показаны раздельно. Цепочка детекции из статьи здесь повторно не измерялась.

MSG-LD · OBTB

ddman1101/Separate-and-detect MSG-LD · checkpoint MSG-LD

msgld_ob использует ветвь атак; msgld_obtb — ветви атак и тембра.
Число шагов DDIM, по умолчанию 200. Можно использовать 50, 100, 200, 250 или 500; некоторые другие значения не поддерживаются.
Полный микс сначала проходит выделение ударных в выбранном процессе. Отдельная дорожка ударных передаётся непосредственно выбранной модели транскрипции или разделения.
Статья оценивает OB, TB и OBTB отдельно; результаты OB не относятся к OBTB по умолчанию. F1 нот и аудиометрики mel-MSE/FAD показаны раздельно. Цепочка детекции из статьи здесь повторно не измерялась.

ADTOF Plus

ADTOF Plus дополняет ADTOF разделением ударных, определением силы удара и обработкой открытого/закрытого хай-хэта. Принимает полные миксы.

ADTOF Plus source (pinned)ADTOF PyTorch source (pinned)ADTOF Plus paper ADTOF ISMIR 2021 paper Pinned ADTOF Plus technical guide

Включите для полного микса, чтобы сначала отделить ударные; отключите для отдельной дорожки ударных.
Порог обнаружения ударов барабанов в ADTOF Plus; оставьте поле пустым для значения модели по умолчанию.
После транскрипции анализирует ритм оригинала и записывает темп в MIDI, сохраняя время звучания нот.

ADTOF Direct · PyTorch

ADTOF Direct транскрибирует отдельную дорожку ударных с помощью PyTorch ADTOF. Для полного микса TelkNet сначала выделяет ударные через AudioSep-Hive, без обработки силы удара и открытого/закрытого хай-хэта из Plus.

ADTOF PyTorch source (pinned)Original ADTOF source ISMIR 2021 paper materials Signals 2023 paper

Отдельно настройте пороги обнаружения бочки, малого барабана, хай-хэта, томов и тарелок.
Временное разрешение, по умолчанию 100 FPS; изменение может повлиять на качество транскрипции.
После транскрипции анализирует ритм оригинала и записывает темп в MIDI, сохраняя время звучания нот.

ADT_STR · tau=0.8

ADT_STR определяет начало и силу ударов для 26 классов ударных и экспортирует MIDI.

pier-maker92/ADT_STR ADT_STR · checkpoint ADT_STR

Выберите официально опубликованный вариант весов.
Максимум генерируемых token на фрагмент; официальное значение 1024.
Официальный размер пакета инференса: число одновременно обрабатываемых фрагментов.
Полный микс сначала проходит выделение ударных в выбранном процессе. Отдельная дорожка ударных передаётся непосредственно выбранной модели транскрипции или разделения.
Setting-1–Setting-4 в таблице 2 — эксперименты обучения, а не доступные веса τ=0.4/0.6/0.8. Результаты получены на отдельных барабанных дорожках, а не на полных миксах.

ADT_STR · tau=0.4

ADT_STR определяет начало и силу ударов для 26 классов ударных и экспортирует MIDI.

pier-maker92/ADT_STR ADT_STR · checkpoint ADT_STR

Выберите официально опубликованный вариант весов.
Максимум генерируемых token на фрагмент; официальное значение 1024.
Официальный размер пакета инференса: число одновременно обрабатываемых фрагментов.
Полный микс сначала проходит выделение ударных в выбранном процессе. Отдельная дорожка ударных передаётся непосредственно выбранной модели транскрипции или разделения.
Setting-1–Setting-4 в таблице 2 — эксперименты обучения, а не доступные веса τ=0.4/0.6/0.8. Результаты получены на отдельных барабанных дорожках, а не на полных миксах.

ADT_STR · tau=0.6

ADT_STR определяет начало и силу ударов для 26 классов ударных и экспортирует MIDI.

pier-maker92/ADT_STR ADT_STR · checkpoint ADT_STR

Выберите официально опубликованный вариант весов.
Максимум генерируемых token на фрагмент; официальное значение 1024.
Официальный размер пакета инференса: число одновременно обрабатываемых фрагментов.
Полный микс сначала проходит выделение ударных в выбранном процессе. Отдельная дорожка ударных передаётся непосредственно выбранной модели транскрипции или разделения.
Setting-1–Setting-4 в таблице 2 — эксперименты обучения, а не доступные веса τ=0.4/0.6/0.8. Результаты получены на отдельных барабанных дорожках, а не на полных миксах.

Бумажные и эталонные заметки

Enhanced Automatic Drum Transcription via Drum Stem Source Separation

arXiv - 2025

Paper Pinned implementation

ADTOF: A large dataset of non-synthetic music for automatic drum transcription

ISMIR - 2021

Paper Paper materials

High-Quality and Reproducible Automatic Drum Transcription from Crowdsourced Data

Signals - 2023

Paper

Официальные / хранилища

ddman1101/Separate-and-detect MSG-LD · checkpoint ADTOF Plus source (pinned)ADTOF PyTorch source (pinned)Original ADTOF source pier-maker92/ADT_STR ADT_STR · checkpoint

Статьи / технические заметки

MSG-LD ADTOF Plus paper ADTOF ISMIR 2021 paper Pinned ADTOF Plus technical guide ISMIR 2021 paper materials Signals 2023 paper ADT_STR

Руководство по параметрам

Включите для полного микса, чтобы сначала отделить ударные; отключите для отдельной дорожки ударных.
Порог обнаружения ударов барабанов в ADTOF Plus; оставьте поле пустым для значения модели по умолчанию.
Отдельно настройте пороги обнаружения бочки, малого барабана, хай-хэта, томов и тарелок.
Временное разрешение, по умолчанию 100 FPS; изменение может повлиять на качество транскрипции.
После транскрипции анализирует ритм оригинала и записывает темп в MIDI, сохраняя время звучания нот.

Рабочий процесс

1Полный микс сначала проходит выделение ударных в выбранном процессе. Отдельная дорожка ударных передаётся непосредственно выбранной модели транскрипции или разделения.
2Скачайте MIDI и проверьте бочку, малый барабан, хай-хэт и остальные элементы.

Что проверить

Полный микс сначала проходит выделение ударных в выбранном процессе. Отдельная дорожка ударных передаётся непосредственно выбранной модели транскрипции или разделения.
Временное разрешение, по умолчанию 100 FPS; изменение может повлиять на качество транскрипции.

Модели в этой области

Записей: 3

Здесь приведены открытые результаты тестирования моделей, используемых на сайте и вне его. По умолчанию показана полная исходная таблица; для сравнения можно выбрать условия и метрики. Результаты разных условий нельзя сравнивать напрямую.

Показаны только записи с проверенной публичной реализацией инференса и соответствующими весами, а также алгоритмы без обученных весов. Закрытые сервисы, неопубликованные веса и неподтверждённые версии экспериментов исключены. Это не общий рейтинг всех моделей.

Публичные веса не подтверждают полноценную лицензию с открытым исходным кодом. Разверните данные для просмотра заявленных лицензий весов и условий доступа. Отсутствие лицензии отмечено отдельно.

ТестКатегория рейтинга

MSG-LD / ADTOF / LarsNet · MDB + ENST · 5 classes · 50 ms

Выберите набор данных, чтобы увидеть все метрики каждой модели. Строки упорядочены по официальному месту или выбранной метрике. Жирным выделено лучшее сопоставимое значение каждого столбца, включая равные результаты. Разные протоколы оценки ранжируются отдельно; отсутствующие оценки обозначены -.

Ранжировать по метрике

MSG-LD / ADTOF / LarsNet · MDB + ENST · 5 classes · 50 ms
Место по метрике	Модель	MDB · Overall	ENST · Overall	MDB					ENST
Место по метрике	Модель	MDB · Overall	ENST · Overall	Kick↑Ф1 (%)	Snare↑Ф1 (%)	Toms↑Ф1 (%)	Hi-Hats↑Ф1 (%)	Cymbals↑Ф1 (%)	Kick↑Ф1 (%)	Snare↑Ф1 (%)	Toms↑Ф1 (%)	Hi-Hats↑Ф1 (%)	Cymbals↑Ф1 (%)
1	ADTOF Открытые веса · Код инференса Открытые веса Код инференса`Frame_RNN_adtofAll_0.data-00000-of-00001 + .index`Лицензия весов (заявление репозитория): CC-BY-NC-SA-4.0	79.5	70.9	85.1	75.2	52	77.3	84.9	79.5	59.9	58.1	77.7	65.7
2	MSG-LD OBМодель на сайте Открытые веса · Код инференса Открытые веса Код инференса Лицензия весов (заявление репозитория): mit	70.7	64	93.1	76	26.8	65	48.1	82.1	64.2	49.1	63	39.1
3	MSG-LD OBTB Открытые веса · Код инференса Открытые веса Код инференса Лицензия весов (заявление репозитория): mit	69	63.6	-	-	-	-	-	-	-	-	-	-

Исходные записи (3)

Отметки обозначают используемые на сайте модели или компоненты. Оценки и параметры взяты из указанных тестов, а не из новой проверки всей цепочки обработки сайта.

MSG-LD · Tables 3–4 ↗Проверено: 2026-09-27

Все источники оценок (6)

Наборы данных, версии и условия разделены; сохраняются и источники без допущенных строк.

ADTOF-PyTorch README ↗
Развёртываемых 2 / исходных строк 2
Ударные в MIDI ↗
Развёртываемых 6 / исходных строк 6
Ударные в MIDI ↗
Развёртываемых 3 / исходных строк 6
Вне рейтинга: 3
Для этих экспериментов не проверен полный открытый пакет инференса. Другие веса модели с тем же именем не подходят.
Vogl et al. 8-class baseline · MDB · 8-class evaluation · onset only · 50 ms · Vogl et al. 8-class baseline · RBMA · 8-class evaluation · onset only · 50 ms · Vogl et al. 8-class baseline · ENST · 8-class evaluation · onset only · 50 ms
ADT-STR · Table 2 ↗
Развёртываемых 0 / исходных строк 8
Вне рейтинга: 8
Для этих экспериментов не проверен полный открытый пакет инференса. Другие веса модели с тем же именем не подходят.
Setting-1 · ENST · Setting-2 · ENST · Setting-3 · ENST · Setting-4 · ENST · Setting-1 · MDB · Setting-2 · MDB · Setting-3 · MDB · Setting-4 · MDB
MSG-LD · Table 3 ↗
Развёртываемых 2 / исходных строк 3
Вне рейтинга: 1
Для этих экспериментов не проверен полный открытый пакет инференса. Другие веса модели с тем же именем не подходят.
LarsNet
MSG-LD · Table 4 ↗
Развёртываемых 2 / исходных строк 4
Вне рейтинга: 2
Для этих экспериментов не проверен полный открытый пакет инференса. Другие веса модели с тем же именем не подходят.
MSG-LD Vanilla · MSG-LD TB

Все исходные результаты и источники

Оценки относятся к указанным данным, метрике и версии модели. Результаты разных тестов нельзя сравнивать напрямую.

В таблице указаны только модели с открытыми весами или конфигурациями, которые можно запустить локально.

ADTOF-PyTorch README

Развёртываемых 2 / исходных строк 2

ADTOF-PyTorch README · PyTorch 88.51 · Keras 88.74

Ранжировать по метрике

ADTOF-PyTorch README
Место по метрике	Модель	Recall↑	Precision↑	F-measure↑
1	ADTOF (original) Открытые веса · Код инференса Frame_RNN_adtofAll_0.data-00000-of-00001 + .index Код инференса Лицензия весов (заявление репозитория): CC-BY-NC-SA-4.0	88.68	89.90	88.74
2	ADTOF-pytorch Открытые веса · Код инференса src/adtof_pytorch/data/adtof_frame_rnn_pytorch_weights.pth Код инференсаЛицензия весов не указана	88.26	89.83	88.51

Исходные записи (2)

ADTOF-PyTorch README ↗Проверено: 2026-10-25