Завантаження...

Ударні в MIDI · MSG-LD / ADTOF · TelkNet

MIDI / транскрипціяGPU навантаженняADT_STR · Вихідний код adt-str · Ваги ADT_STR · tau=0.4 · Стаття

Ударні в MIDI

ADTOF Plus · ADTOF Direct · ADT_STR · MSG-LD. Повний мікс спочатку проходить виділення ударних у вибраному процесі. Окрема доріжка ударних передається безпосередньо вибраній моделі транскрипції або розділення.

15 кредити/використанняВведення файлуМаксимум 100 MBОцінка — 20-1800 секунди

Вхідні дані

Підтримує введення у форматах, таких як mp3 / wav / flac / ogg / m4a / aac / aif / aiff / mp4 / mov / mkv

Підтримувані формати

mp3wavflacoggm4aaacaifaiffmp4movmkv

Вихід

MIDI

Кейс використання

Редагування нот, інструментування та деталей виконання.

Виберіть сімейство моделей

Ударні в MIDI · MSG-LDДоступноРозділення ударних і виявлення атак для чернетки MIDI; динаміка й тривалість відтворення фіксовані.Ударні в MIDI · ADTOFДоступноУдарні в MIDI: Plus додає динаміку й відкритий/закритий хай-хет; Direct транскрибує безпосередньо.Ударні в MIDI · ADT_STRДоступноПочатки нот і динаміка 26 класів ударних; три τ означають різне навчання.

Виберіть версію або режим обробки

Ударні в MIDI · ADT_STR · tau=0.8Навчені ваги setting-tau-0.8 для атак і динаміки 26 класів. Почніть з 0.8, порівняйте той самий уривок; τ — не чутливість детектора.РекомендованоДоступноУдарні в MIDI · ADT_STR · tau=0.4Навчені ваги setting-tau-0.4 для атак і динаміки 26 класів. Почніть з 0.8, порівняйте той самий уривок; τ — не чутливість детектора.ДоступноУдарні в MIDI · ADT_STR · tau=0.6Навчені ваги setting-tau-0.6 для атак і динаміки 26 класів. Почніть з 0.8, порівняйте той самий уривок; τ — не чутливість детектора.Доступно

Виберіть модель для свого матеріалу й завдання та перегляньте приклади перед надсиланням.

Вартість, час, формати й параметри залежать від обраної моделі.

Швидкий відгук

У відгуку вкажіть інструмент, кроки та проблему. Знімки екрана допоможуть її знайти.

Моделі, параметри та джерела

ADT_STR визначає початок і силу ударів для 26 класів ударних та експортує MIDI.

MSG-LD · OBADTOF-PyTorch READMEADTOF (original)ADTOF Direct · PyTorchADTOF Plus paper, Table 1ADTOF PlusOriginal ADTOFADTOF Plus paper, Table 2Vogl et al. 8-class baselineADT-STR · Table 2ADT-STR Setting-1ADT-STR Setting-2

MSG-LD · OB

MSG-LD створює п’ять доріжок ударних і визначає початки ударів; у MIDI сила удару 100, тривалість відтворення 0,1 секунди.

ddman1101/Separate-and-detect MSG-LD · checkpoint MSG-LD

msgld_ob використовує гілку атак; msgld_obtb — гілки атак і тембру.
Кількість кроків DDIM, типово 200. Можна використовувати 50, 100, 200, 250 або 500; деякі інші значення не підтримуються.
Повний мікс спочатку проходить виділення ударних у вибраному процесі. Окрема доріжка ударних передається безпосередньо вибраній моделі транскрипції або розділення.
Стаття оцінює OB, TB та OBTB окремо; оцінки OB не належать типовому OBTB. F1 нот та аудіометрики mel-MSE/FAD подано окремо. Ланцюжок виявлення зі статті тут повторно не вимірювали.

MSG-LD · OBTB

ddman1101/Separate-and-detect MSG-LD · checkpoint MSG-LD

msgld_ob використовує гілку атак; msgld_obtb — гілки атак і тембру.
Кількість кроків DDIM, типово 200. Можна використовувати 50, 100, 200, 250 або 500; деякі інші значення не підтримуються.
Повний мікс спочатку проходить виділення ударних у вибраному процесі. Окрема доріжка ударних передається безпосередньо вибраній моделі транскрипції або розділення.
Стаття оцінює OB, TB та OBTB окремо; оцінки OB не належать типовому OBTB. F1 нот та аудіометрики mel-MSE/FAD подано окремо. Ланцюжок виявлення зі статті тут повторно не вимірювали.

ADTOF Plus

ADTOF Plus доповнює ADTOF розділенням ударних, визначенням сили удару та обробкою відкритого/закритого хай-хета. Приймає повні мікси.

ADTOF Plus source (pinned)ADTOF PyTorch source (pinned)ADTOF Plus paper ADTOF ISMIR 2021 paper Pinned ADTOF Plus technical guide

Увімкніть для повного міксу, щоб спочатку відокремити ударні; вимкніть для окремої доріжки ударних.
Поріг виявлення ударів барабанів у ADTOF Plus; залиште порожнім для типового значення моделі.
Після транскрипції аналізує ритм оригіналу й записує темп у MIDI, зберігаючи час звучання нот.

ADTOF Direct · PyTorch

ADTOF Direct транскрибує окрему доріжку ударних за допомогою PyTorch ADTOF. Для повного міксу TelkNet спочатку виділяє ударні через AudioSep-Hive без обробки сили удару та відкритого/закритого хай-хета з Plus.

ADTOF PyTorch source (pinned)Original ADTOF source ISMIR 2021 paper materials Signals 2023 paper

Окремо налаштуйте пороги виявлення бочки, малого барабана, хай-хета, томів і тарілок.
Часова роздільність, типово 100 FPS; зміна може вплинути на якість транскрипції.
Після транскрипції аналізує ритм оригіналу й записує темп у MIDI, зберігаючи час звучання нот.

ADT_STR · tau=0.8

pier-maker92/ADT_STR ADT_STR · checkpoint ADT_STR

Оберіть офіційно опублікований варіант ваг.
Максимум генерованих token на фрагмент; офіційне значення 1024.
Офіційний розмір пакета інференсу: кількість одночасно оброблюваних фрагментів.
Повний мікс спочатку проходить виділення ударних у вибраному процесі. Окрема доріжка ударних передається безпосередньо вибраній моделі транскрипції або розділення.
Setting-1–Setting-4 у таблиці 2 — навчальні експерименти, а не доступні ваги τ=0.4/0.6/0.8. Оцінки стосуються ізольованих барабанів, а не повних міксів.

ADT_STR · tau=0.4

pier-maker92/ADT_STR ADT_STR · checkpoint ADT_STR

Оберіть офіційно опублікований варіант ваг.
Максимум генерованих token на фрагмент; офіційне значення 1024.
Офіційний розмір пакета інференсу: кількість одночасно оброблюваних фрагментів.
Повний мікс спочатку проходить виділення ударних у вибраному процесі. Окрема доріжка ударних передається безпосередньо вибраній моделі транскрипції або розділення.
Setting-1–Setting-4 у таблиці 2 — навчальні експерименти, а не доступні ваги τ=0.4/0.6/0.8. Оцінки стосуються ізольованих барабанів, а не повних міксів.

ADT_STR · tau=0.6

pier-maker92/ADT_STR ADT_STR · checkpoint ADT_STR

Оберіть офіційно опублікований варіант ваг.
Максимум генерованих token на фрагмент; офіційне значення 1024.
Офіційний розмір пакета інференсу: кількість одночасно оброблюваних фрагментів.
Повний мікс спочатку проходить виділення ударних у вибраному процесі. Окрема доріжка ударних передається безпосередньо вибраній моделі транскрипції або розділення.
Setting-1–Setting-4 у таблиці 2 — навчальні експерименти, а не доступні ваги τ=0.4/0.6/0.8. Оцінки стосуються ізольованих барабанів, а не повних міксів.

Паперові та бенчмаркові нотатки

Enhanced Automatic Drum Transcription via Drum Stem Source Separation

arXiv - 2025

Paper Pinned implementation

ADTOF: A large dataset of non-synthetic music for automatic drum transcription

ISMIR - 2021

Paper Paper materials

High-Quality and Reproducible Automatic Drum Transcription from Crowdsourced Data

Signals - 2023

Paper

Офіційні / репозиторії

ddman1101/Separate-and-detect MSG-LD · checkpoint ADTOF Plus source (pinned)ADTOF PyTorch source (pinned)Original ADTOF source pier-maker92/ADT_STR ADT_STR · checkpoint

Статті / технічні нотатки

MSG-LD ADTOF Plus paper ADTOF ISMIR 2021 paper Pinned ADTOF Plus technical guide ISMIR 2021 paper materials Signals 2023 paper ADT_STR

Керівництво параметрів

Увімкніть для повного міксу, щоб спочатку відокремити ударні; вимкніть для окремої доріжки ударних.
Поріг виявлення ударів барабанів у ADTOF Plus; залиште порожнім для типового значення моделі.
Окремо налаштуйте пороги виявлення бочки, малого барабана, хай-хета, томів і тарілок.
Часова роздільність, типово 100 FPS; зміна може вплинути на якість транскрипції.
Після транскрипції аналізує ритм оригіналу й записує темп у MIDI, зберігаючи час звучання нот.

Робочий процес

1Повний мікс спочатку проходить виділення ударних у вибраному процесі. Окрема доріжка ударних передається безпосередньо вибраній моделі транскрипції або розділення.
2Завантажте MIDI й перевірте бас-барабан, малий барабан, хай-хет та інші елементи.

Що перевірити

Повний мікс спочатку проходить виділення ударних у вибраному процесі. Окрема доріжка ударних передається безпосередньо вибраній моделі транскрипції або розділення.
Часова роздільність, типово 100 FPS; зміна може вплинути на якість транскрипції.

Моделі в цій галузі

Записів: 3

Містить відкриті результати тестування моделей, що використовуються тут і поза сайтом. Типово показано повну таблицю джерела; для порівняння можна вибрати умови й метрики. Оцінки за різних умов тестування не можна порівнювати безпосередньо.

Показано лише записи з перевіреною публічною реалізацією інференсу та відповідними вагами, а також алгоритми без навчених ваг. Закриті сервіси, неопубліковані ваги та непідтверджені версії експериментів виключено. Це не загальний рейтинг усіх моделей.

Публічні ваги не підтверджують повної ліцензії відкритого коду. Розгорніть дані для перегляду заявлених ліцензій ваг і умов доступу. Відсутні ліцензії позначено окремо.

Порівняльний тестКатегорія

ADT-STR · ENST / MDB · full vocabulary

Виберіть набір даних, щоб побачити всі метрики кожної моделі. Рядки впорядковано за офіційним місцем або вибраною метрикою. Жирним виділено найкраще порівнюване значення кожного стовпця, включно з однаковими результатами. Різні протоколи оцінювання ранжуються окремо; відсутні оцінки позначено -.

Рекомендація в README ADT-STR суперечить графіку результатів. Рейтинг використовує числа, позначені на офіційному графіку.

Ранжувати за метрикою

ADT-STR · ENST / MDB · full vocabulary
Місце за метрикою	Модель	ENST↑F1 %	MDB↑F1 %
1	ADT-STR · τ=0.4Модель на сайті Відкриті ваги · Код інференсу Відкриті ваги Код інференсу`setting-tau-0.4/model.safetensors`Ліцензію ваг не вказано	60	71
2	ADT-STR · τ=0.6 Відкриті ваги · Код інференсу Відкриті ваги Код інференсу`setting-tau-0.6/model.safetensors`Ліцензію ваг не вказано	58	65
3	ADT-STR · τ=0.8 Відкриті ваги · Код інференсу Відкриті ваги Код інференсу`setting-tau-0.8/model.safetensors`Ліцензію ваг не вказано	52	61

Початкові записи (3)

Позначки вказують на моделі чи компоненти, які використовуються на сайті. Оцінки й параметри взято із зазначених тестів, а не з нового оцінювання всього процесу обробки сайту.

ADT-STR · released checkpoint score figure ↗Перевірено: 2026-09-27

Усі джерела оцінок (6)

Набори даних, версії та умови розділено; збережено й джерела без допущених рядків.

ADTOF-PyTorch README ↗
Для розгортання 2 / початкових рядків 2
Ударні в MIDI ↗
Для розгортання 6 / початкових рядків 6
Ударні в MIDI ↗
Для розгортання 3 / початкових рядків 6
Поза рейтингом: 3
Для цих експериментів не перевірено повний відкритий пакет інференсу. Інші ваги моделі з тією самою назвою не підходять.
Vogl et al. 8-class baseline · MDB · 8-class evaluation · onset only · 50 ms · Vogl et al. 8-class baseline · RBMA · 8-class evaluation · onset only · 50 ms · Vogl et al. 8-class baseline · ENST · 8-class evaluation · onset only · 50 ms
ADT-STR · Table 2 ↗
Для розгортання 0 / початкових рядків 8
Поза рейтингом: 8
Для цих експериментів не перевірено повний відкритий пакет інференсу. Інші ваги моделі з тією самою назвою не підходять.
Setting-1 · ENST · Setting-2 · ENST · Setting-3 · ENST · Setting-4 · ENST · Setting-1 · MDB · Setting-2 · MDB · Setting-3 · MDB · Setting-4 · MDB
MSG-LD · Table 3 ↗
Для розгортання 2 / початкових рядків 3
Поза рейтингом: 1
Для цих експериментів не перевірено повний відкритий пакет інференсу. Інші ваги моделі з тією самою назвою не підходять.
LarsNet
MSG-LD · Table 4 ↗
Для розгортання 2 / початкових рядків 4
Поза рейтингом: 2
Для цих експериментів не перевірено повний відкритий пакет інференсу. Інші ваги моделі з тією самою назвою не підходять.
MSG-LD Vanilla · MSG-LD TB

Усі первинні результати та джерела

Оцінки стосуються вказаних даних, метрики й версії моделі. Різні тести не можна порівнювати безпосередньо.

У таблиці наведено лише моделі з відкритими вагами або конфігураціями, які можна запускати локально.

ADTOF-PyTorch README

Для розгортання 2 / початкових рядків 2

ADTOF-PyTorch README · PyTorch 88.51 · Keras 88.74

Ранжувати за метрикою

ADTOF-PyTorch README
Місце за метрикою	Модель	Recall↑	Precision↑	F-measure↑
1	ADTOF (original) Відкриті ваги · Код інференсу Frame_RNN_adtofAll_0.data-00000-of-00001 + .index Код інференсу Ліцензія ваг (заява репозиторію): CC-BY-NC-SA-4.0	88.68	89.90	88.74
2	ADTOF-pytorch Відкриті ваги · Код інференсу src/adtof_pytorch/data/adtof_frame_rnn_pytorch_weights.pth Код інференсуЛіцензію ваг не вказано	88.26	89.83	88.51

Початкові записи (2)

ADTOF-PyTorch README ↗Перевірено: 2026-10-25