Что такое Piano TransKun V2 Aug?

Piano MIDI из отдельного V2 Aug checkpoint, полезно для сравнения с стандартным маршрутом V2

Для кого Piano TransKun V2 Aug?

MIDI / транскрипция Piano MIDI из отдельного V2 Aug checkpoint, полезно для сравнения с стандартным маршрутом V2

С какими задачами Piano TransKun V2 Aug может помочь?

MIDI / транскрипция; Piano MIDI из отдельного V2 Aug checkpoint, полезно для сравнения с стандартным маршрутом V2; Сравнение бок о бок с стандартной версией V2, чтобы понять, подходит ли дополненный checkpoint к записи; Сольный piano или одноклавишный материал; TransKun V2 Aug — это публичный checkpoint с более сильными сводными метрами MIREX; Сравните черновики V2 и V2 Aug MIDI на одном piano; Попробуйте вариант MIREX summary-leading TransKun для более широкого обобщения

Piano TransKun V2 Aug

Q: Какие модели и ключевые слова связаны с Piano TransKun V2 Aug?

TransKun V2 Aug, Yujia-Yan/TransKun, TransKun V2 Aug checkpoint, transkun PyPI, TransKun ISMIR 2024, MIREX 2024 permanent results, TransKun V2, Aria-AMT

Модели, параметры и источники

TransKun V2 Aug — это отдельный локальный маршрут транскрипции piano с использованием официального checkpoint дополнения данных. Отправьте piano-файл для генерации MIDI без замены стандартного инструмента V2.

TransKun V2 AugYujia-Yan/TransKunTransKun V2 Aug checkpointtranskun PyPITransKun ISMIR 2024MIREX 2024 permanent resultsTransKun V2Aria-AMTEleutherAI/aria-amtAria-MIDI HF datasetMIREX 2024 summaryhFT-Transformer

TransKun V2 Aug

TransKun V2 Aug — это отдельный локальный маршрут checkpoint дополнения данных, использующий checkpointTransformerAug.zip.

Yujia-Yan/TransKun TransKun V2 Aug checkpoint transkun PyPI TransKun ISMIR 2024 MIREX 2024 permanent results

Архитектура: TransKun V2 Aug использует тот же неиерархический Трансформер и семейство neural semi-CRF interval decoding, что и TransKun V2.
Время выполнения: использует checkpointMSimplerAug/checkpoint.pt плюс model.conf, извлеченный из checkpointTransformerAug.zip, а не упакованный 2.0.pt ресурс V2.
Результат: single-track piano MIDI. MIREX 2024 резюме преимущественно в V2 Aug, тогда как ряды Maestro note+offset+velocity и педали немного выше для V2.

Сравнение моделей

Модель

Роль

Почему он используется

Влияние на выход

МодельTransKun V2 Aug

Yujia-Yan/TransKun TransKun V2 Aug checkpoint transkun PyPI TransKun ISMIR 2024 MIREX 2024 permanent results

РольМаршрут, обученный на аугментации TransKun

Почему он используетсяЛучше всего выбирать, когда вы хотите лидировать в MIREX Summary TransKun базовой линии как отдельный цикл, а не тихо заменять V2.

Влияние на выходОднопутные piano MIDI от V2 в августе checkpoint.

МодельTransKun V2

Yujia-Yan/TransKun MIREX 2024 permanent results

РольБыстрые и высокоточные piano AMT

Почему он используетсяПубличные ряды MIREX делают это самым чётким piano маршрутом в этом каталоге.

Влияние на выходСоло piano MIDI

МодельAria-AMT

EleutherAI/aria-amt Aria-MIDI HF dataset

РольSeq-to-seq piano AMT маршрут

Почему он используетсяСтатья Aria-AMT Таблица 1 содержит сравнения MAESTRO/MAPS; это не спор в таблице лидеров MIREX.

Влияние на выходСоло piano MIDI

Публичная таблица лидеров: MIREX 2024 резюме piano таблице лидеров по транскрипции / MIREX 2024 Maestro piano рядов / Строки фортепиано MAPS MIREX 2024 / Строки фортепиано SMD MIREX 2024

Область открытых локально развёртываемых моделей: в таблицы входят только строки с проверенными загружаемыми весами или конфигурациями и способом локального запуска. SOTA и «Лучший» относятся лишь к показанным проверенным строкам, не включают облачные, только API или коммерческие системы и не являются универсальным рейтингом.

MIREX 2024 резюме piano таблице лидеров по транскрипции

MIREX 2024 permanent results

Сводные строки MIREX сравнивают среднее начало нот F1 по трёх наборам данных и целостную ноту F1 для Maestro и SMD.

Звание	Модель	Holistic note F1 (%)	Подробные метрики
MIREX 2024 summary	TransKun V2 AugTelkNetMIREX 2024 permanent results	90.81SOTA	Summary onset F1 (%)96.48Лучший
MIREX 2024 summary	TransKun V2MIREX 2024 permanent results	87.64	Summary onset F1 (%)94.90
MIREX 2024 summary	hFT-TransformerMIREX 2024 permanent results	83.59	Summary onset F1 (%)94.16

MIREX 2024 Maestro piano рядов

MIREX 2024 permanent results

Публичные piano транскрипционные споры о Maestro. Значения отображаются в процентах для читаемости.

Звание	Модель	Начало ноты+смещение+скорость F1 (%)	Подробные метрики
MIREX 2024 published row	TransKun V2MIREX 2024 permanent results	92.96SOTA	F1 активации (%)95.30ЛучшийОбратите внимание на начало F1 (%)98.32Начало ноты+смещение F1 (%)93.49ЛучшийF1 активации педали (%)95.41ЛучшийНачало нажатия педали F1 (%)86.42ЛучшийF1 начала+окончания педали (%)83.77Лучший
MIREX 2024 published row	TransKun V2 AugTelkNetMIREX 2024 permanent results	92.64	F1 активации (%)95.05Обратите внимание на начало F1 (%)98.40ЛучшийНачало ноты+смещение F1 (%)93.14F1 активации педали (%)94.54Начало нажатия педали F1 (%)84.53F1 начала+окончания педали (%)81.02
MIREX 2024 published row	hFT-TransformerMIREX 2024 permanent results	89.48	F1 активации (%)93.07Обратите внимание на начало F1 (%)97.45Начало ноты+смещение F1 (%)90.45

Строки фортепиано MAPS MIREX 2024

MIREX 2024 permanent results

Полный набор публичных строк MAPS из результатов MIREX 2024 по полифонической транскрипции.

Звание	Модель	Обратите внимание на начало F1 (%)	Подробные метрики
MIREX 2024 published row	TransKun V2 AugTelkNetMIREX 2024 permanent results	92.19SOTA	F1 активации (%)88.43ЛучшийНачало ноты+смещение F1 (%)69.75ЛучшийНачало ноты+смещение+скорость F1 (%)54.95ЛучшийF1 активации педали (%)85.83ЛучшийНачало нажатия педали F1 (%)73.43ЛучшийF1 начала+окончания педали (%)55.32Лучший
MIREX 2024 published row	TransKun V2MIREX 2024 permanent results	88.49	F1 активации (%)85.35Начало ноты+смещение F1 (%)64.61Начало ноты+смещение+скорость F1 (%)44.46F1 активации педали (%)84.49Начало нажатия педали F1 (%)67.32F1 начала+окончания педали (%)50.88
MIREX 2024 published row	hFT-TransformerMIREX 2024 permanent results	87.89	F1 активации (%)80.19Начало ноты+смещение F1 (%)57.19Начало ноты+смещение+скорость F1 (%)36.12

Строки фортепиано SMD MIREX 2024

MIREX 2024 permanent results

Полный набор публичных строк SMD из результатов MIREX 2024 по полифонической транскрипции.

Звание	Модель	Обратите внимание на начало F1 (%)	Подробные метрики
MIREX 2024 published row	TransKun V2 AugTelkNetMIREX 2024 permanent results	98.84SOTA	F1 активации (%)94.48ЛучшийНачало ноты+смещение F1 (%)92.05ЛучшийНачало ноты+смещение+скорость F1 (%)88.97ЛучшийF1 активации педали (%)94.47ЛучшийНачало нажатия педали F1 (%)83.83F1 начала+окончания педали (%)78.37Лучший
MIREX 2024 published row	TransKun V2MIREX 2024 permanent results	97.90	F1 активации (%)93.40Начало ноты+смещение F1 (%)89.90Начало ноты+смещение+скорость F1 (%)82.32F1 активации педали (%)94.20Начало нажатия педали F1 (%)83.88ЛучшийF1 начала+окончания педали (%)77.30
MIREX 2024 published row	hFT-TransformerMIREX 2024 permanent results	97.13	F1 активации (%)91.15Начало ноты+смещение F1 (%)86.92Начало ноты+смещение+скорость F1 (%)77.69

Парный инструмент

Как выбрать между V2 и V2 Aug?

Для разных реальных записей и тембров рояля сначала выбирайте TransKun V2 Aug. Для чистого фортепиано, когда важнее отпускание клавиш, динамика и педаль, V2 может быть лучше. V2 No Pedal Ext сохраняет длину ноты до фактического отпускания клавиши без продления педалью. Ни одна версия не лидирует во всех метриках, но обе остаются одними из самых полных, зрелых и доказательных открытых решений для сольного фортепиано.

Открыть Piano TransKun V2

Бумажные и эталонные заметки

Scoring Time Intervals Using Non-Hierarchical Transformer for Automatic Piano Transcription

ISMIR - 2024

Статья TransKun V2 сообщает о архитектуре интервального подсчёта трансформаторов и более высоком результате F1 по подзадачам Maestro.

arXiv:2404.09466

Skipping the Frame-Level: Event-Based Piano Transcription with Neural Semi-CRFs

NeurIPS - 2021

В статье Semi-CRF 2021 года транскрипция piano предсказание интервалов/событий, а не сшивание обнаружений на уровне кадров.

OpenReview

Официальные / хранилища

Yujia-Yan/TransKun TransKun V2 Aug checkpoint transkun PyPI

Статьи / технические заметки

TransKun ISMIR 2024 MIREX 2024 permanent results

Руководство по параметрам

Solo piano: эти модели предназначены для чистых piano или клавиатурных записей.

Piano TransKun V2 Aug

Модели, параметры и источники

TransKun V2 Aug

Сравнение моделей

Публичная таблица лидеров: MIREX 2024 резюме piano таблице лидеров по транскрипции / MIREX 2024 Maestro piano рядов / Строки фортепиано MAPS MIREX 2024 / Строки фортепиано SMD MIREX 2024

MIREX 2024 резюме piano таблице лидеров по транскрипции

MIREX 2024 Maestro piano рядов

Строки фортепиано MAPS MIREX 2024

Строки фортепиано SMD MIREX 2024

Бумажные и эталонные заметки

Scoring Time Intervals Using Non-Hierarchical Transformer for Automatic Piano Transcription

Skipping the Frame-Level: Event-Based Piano Transcription with Neural Semi-CRFs

Официальные / хранилища

Статьи / технические заметки

Руководство по параметрам

Сценарии использования

Рабочий процесс

Предполётный чек-лист

Связанные сценарии

Для использования этого инструмента требуется логин