Что такое Фортепиано в MIDI?

Фортепиано в MIDI Выберите модель и способ обработки Стоимость, время, форматы и параметры зависят от выбранной модели.

Для кого Фортепиано в MIDI?

MIDI / транскрипция Фортепиано в MIDI Выберите модель и способ обработки Стоимость, время, форматы и параметры зависят от выбранной модели.

С какими задачами Фортепиано в MIDI может помочь?

MIDI / транскрипция; Фортепианный MIDI, где окончания нот соответствуют No Pedal Ext и отпусканию клавиши; используйте его для проверки физических границ нот, а не длительности звучания, продлённой педалью.; Преобразуйте фортепианную игру в редактируемый MIDI с окончанием нот при отпускании клавиш; Сольные piano, репетиционные записи или материал только для клавишных; TransKun V2 делает акцент на интервальном моделировании и MIREX 2024 публичных доказательств; Преобразуйте тренировочные записи в MIDI для проверки ритма; Создайте черновик piano партитуры для преподавания или репетиций

Фортепиано в MIDI

Q: Какие модели и ключевые слова связаны с Фортепиано в MIDI?

TransKun V2 No Pedal Ext (packaged 2.0.pt), Yujia-Yan/TransKun, TransKun official model cards, transkun PyPI, TransKun ISMIR 2024, TransKun V2, ByteDance Piano, bytedance/piano_transcription

Модели, параметры и источники

Этот маршрут локально запускает checkpoint TransKun V2 No Pedal Ext (2.0.pt) из upstream-пакета. Стандартные строки MIREX V2 и V2 Aug показаны только как публичный контекст.

TransKun V2 No Pedal Ext (packaged 2.0.pt)Yujia-Yan/TransKunTransKun official model cardstranskun PyPITransKun ISMIR 2024TransKun V2ByteDance Pianobytedance/piano_transcriptionByteDance paperAria-AMTEleutherAI/aria-amtAria-MIDI HF dataset

TransKun V2 No Pedal Ext (packaged 2.0.pt)

Локально по умолчанию используется checkpoint TransKun V2 No Pedal Ext (2.0.pt) из upstream-пакета transkun; он относится к той же архитектуре и доработан и расширен по ветке V2 Aug.

Yujia-Yan/TransKun TransKun official model cards transkun PyPI TransKun ISMIR 2024

Архитектура: TransKun V2 No Pedal Ext относится к тому же семейству неиерархического Transformer и декодирования интервалов neural semi-CRF, что и публичные V2 и V2 Aug.
Только публичная справка: MIREX 2024 публикует стандартные строки TransKun V2 и V2 Aug; эти оценки не относятся к локальному checkpoint 2.0.pt.
Выход: piano MIDI из пакетного TransKun V2 No Pedal Ext (2.0.pt); оценки MIREX стандартных V2 и V2 Aug приведены только для справки.

TransKun V2 Aug

TransKun V2 Aug — это отдельный локальный маршрут checkpoint дополнения данных, использующий checkpointTransformerAug.zip.

Yujia-Yan/TransKun TransKun V2 Aug checkpoint transkun PyPI TransKun ISMIR 2024 MIREX 2024 permanent results

Архитектура: TransKun V2 Aug использует тот же неиерархический Трансформер и семейство neural semi-CRF interval decoding, что и TransKun V2.
Результат: single-track piano MIDI. MIREX 2024 резюме преимущественно в V2 Aug, тогда как ряды Maestro note+offset+velocity и педали немного выше для V2.

TransKun V2 Standard (checkpointMSimpler)

Использует официальный checkpoint Standard; окончания нот следуют акустической длительности, продлённой педалью. Отдельно от ориентированного на отпускание клавиш NoExt и V2 Aug.

Yujia-Yan/TransKun source (pinned)TransKun official model cards transkun PyPI TransKun ISMIR 2024

Скачайте MIDI и проверьте высоты и длительности нот в MIDI- или нотном редакторе.

Aria-AMT piano-medium-double-1.0

Aria-AMT использует маршрут EleutherAI seq-to-seq piano с piano-medium-double-1.0.safetensors.

EleutherAI/aria-amt Aria-MIDI HF dataset piano-medium-double-1.0.safetensors Aria-AMT paper

Область применения: piano AMT для транскрипции piano нот.
Репозиторий Aria-AMT документирует реализацию транскрипции seq-to-seq piano и предварительные веса; в статье приведены сравнения MAESTRO/MAPS Table 1.

D3RM released checkpoint

Преобразует аудио фортепиано в дискретные нотные события с помощью опубликованного checkpoint D3RM с диффузионным уточнением и экспортирует редактируемый MIDI и данные нот.

D3RM source (pinned)Released checkpoints D3RM paper

Скачайте MIDI и проверьте высоты и длительности нот в MIDI- или нотном редакторе.

ByteDance Piano CRNN note+pedal

ByteDance Piano CRNN note+pedal использует note_F1=0.9677_pedal_F1=0.9186.pth для соло-piano MIDI с педальными контроллерами.

bytedance/piano_transcription CRNN note/pedal checkpoint TelkNet music-to-midi workflow Piano transcription with pedals

Область применения модели: solo piano или клавиатурный материал, где важны тайминг нот, скорость и детализация педалей.
Определяет нажатия и отпускания педали сустейна для проверки в DAW или нотном редакторе; не определяет мягкую педаль (CC67) и полупедаль.
Форма выхода: одиночный piano MIDI с нотами, длительностью, скоростью и кривыми управления педалями, которые можно позже квантовать, редактировать и сводить.
Лучший вход: чистый solo piano с чёткой динамикой и сдержанным ревербератором; Шум в комнате и дополнительные инструменты делают границы педалей менее надёжными.
Внимание к обзору: плотные аккорды, длинные сустейны, ощущение полупедали и резонанс низкого регистра всё ещё заслуживают ручной проверки.

Сравнение моделей

Модель

Роль

Почему он используется

Влияние на выход

МодельTransKun V2

Yujia-Yan/TransKun TransKun official model cards transkun PyPI TransKun ISMIR 2024

РольБыстрые и высокоточные piano AMT

Почему он используетсяПубличные ряды MIREX делают это самым чётким piano маршрутом в этом каталоге.

Влияние на выходСоло piano MIDI

МодельByteDance Piano

bytedance/piano_transcription ByteDance paper

РольПедаль осведомлённая piano AMT

Почему он используетсяПодходит для записей, где нужно редактировать и ноты, и время работы педали сустейна.

Влияние на выходPiano MIDI с педалями CC событиями

МодельAria-AMT

EleutherAI/aria-amt Aria-MIDI HF dataset

РольSeq-to-seq piano AMT маршрут

Почему он используетсяСтатья Aria-AMT Таблица 1 содержит сравнения MAESTRO/MAPS; это не спор в таблице лидеров MIREX.

Влияние на выходСоло piano MIDI

МодельTransKun V2 Aug

Yujia-Yan/TransKun TransKun V2 Aug checkpoint transkun PyPI TransKun ISMIR 2024 MIREX 2024 permanent results

РольМаршрут, обученный на аугментации TransKun

Почему он используетсяСравните транскрипцию одной записи с результатом TransKun V2, чтобы выбрать вариант, более близкий к исполнению.

Влияние на выходОднопутные piano MIDI от V2 Augе checkpoint.

МодельAria-AMT piano-medium-double-1.0

EleutherAI/aria-amt Aria-MIDI HF dataset piano-medium-double-1.0.safetensors Aria-AMT paper

РольSeq-to-seq piano AMT маршрут

Почему он используетсяСтатья Aria-AMT Таблица 1 содержит сравнения MAESTRO/MAPS; это не спор в таблице лидеров MIREX.

Влияние на выходСоло piano MIDI

МодельByteDance Piano CRNN note+pedal

bytedance/piano_transcription CRNN note/pedal checkpoint TelkNet music-to-midi workflow Piano transcription with pedals

РольПедаль осведомлённая piano AMT

Почему он используетсяПодходит для записей, где нужно редактировать и ноты, и время работы педали сустейна.

Влияние на выходPiano MIDI с педалями CC событиями

Баллы относятся только к указанным данным, метрике и версии. Лидерство в таблице не означает мировой рекорд или результат этого сервиса. Возможности и тесты позволяют предпочесть модель без сопоставимых баллов.

Эталонный график: TransKun · MAESTRO V3 No Ext / TransKun · MAPS (ad hoc align) No Ext / TransKun · SMD No Ext / MIREX 2024 резюме piano таблице лидеров по транскрипции / MIREX 2024 Maestro piano рядов / Строки фортепиано MAPS MIREX 2024 / Строки фортепиано SMD MIREX 2024 / Статья Aria-AMT: сравнение MAESTRO / MAPS / Фортепиано D3RM / ByteDance piano бумажный саундтрек

В таблице указаны только модели с открытыми весами или конфигурациями, которые можно запустить локально.

TransKun · MAESTRO V3 No Ext

TransKun official model card — MAESTRO V3 No Ext

Значения взяты для базового чекпойнта по ссылке, а не получены новым замером работающей здесь модели.