Що таке Фортепіано в MIDI?

Фортепіано в MIDI Виберіть модель і спосіб обробки Вартість, час, формати й параметри залежать від обраної моделі.

Для кого Фортепіано в MIDI?

MIDI / транскрипція Фортепіано в MIDI Виберіть модель і спосіб обробки Вартість, час, формати й параметри залежать від обраної моделі.

З якими завданнями Фортепіано в MIDI може допомогти?

MIDI / транскрипція; Фортепіанний MIDI, де закінчення нот відповідають No Pedal Ext і відпусканню клавіші; використовуйте його для перевірки фізичних меж нот, а не тривалості звучання, подовженої педаллю.; Перетворіть гру на фортепіано на редагований MIDI із завершенням нот після відпускання клавіш; Сольні piano, репетиційні записи або матеріал лише для клавішних; TransKun V2 робить акцент на інтервальному моделюванні та MIREX 2024 публічних доказів; Конвертуйте записи практики у MIDI для перевірки ритму; Створіть piano-ноту для викладання або репетицій

Фортепіано в MIDI

Q: Які моделі та ключові слова пов'язані з Фортепіано в MIDI?

TransKun V2 No Pedal Ext (packaged 2.0.pt), Yujia-Yan/TransKun, TransKun official model cards, transkun PyPI, TransKun ISMIR 2024, TransKun V2, ByteDance Piano, bytedance/piano_transcription

Моделі, параметри та джерела

Цей маршрут локально запускає checkpoint TransKun V2 No Pedal Ext (2.0.pt) з upstream-пакета. Стандартні рядки MIREX V2 і V2 Aug показано лише як публічний контекст.

TransKun V2 No Pedal Ext (packaged 2.0.pt)Yujia-Yan/TransKunTransKun official model cardstranskun PyPITransKun ISMIR 2024TransKun V2ByteDance Pianobytedance/piano_transcriptionByteDance paperAria-AMTEleutherAI/aria-amtAria-MIDI HF dataset

TransKun V2 No Pedal Ext (packaged 2.0.pt)

Локально за замовчуванням використовується checkpoint TransKun V2 No Pedal Ext (2.0.pt) з upstream-пакета transkun; він належить до тієї самої архітектури та доопрацьований і розширений гілкою V2 Aug.

Yujia-Yan/TransKun TransKun official model cards transkun PyPI TransKun ISMIR 2024

Архітектура: TransKun V2 No Pedal Ext належить до того самого сімейства неієрархічного Transformer і декодування інтервалів neural semi-CRF, що й публічні V2 та V2 Aug.
Лише публічна довідка: MIREX 2024 публікує стандартні рядки TransKun V2 і V2 Aug; ці оцінки не належать локальному checkpoint 2.0.pt.
Вихід: piano MIDI з пакетного TransKun V2 No Pedal Ext (2.0.pt); оцінки MIREX стандартних V2 і V2 Aug наведено лише для довідки.

TransKun V2 Aug

TransKun V2 Aug — це окремий локальний маршрут checkpoint доповнення даних із використанням checkpointTransformerAug.zip.

Yujia-Yan/TransKun TransKun V2 Aug checkpoint transkun PyPI TransKun ISMIR 2024 MIREX 2024 permanent results

Архітектура: TransKun V2 Aug використовує той самий неієрархічний Трансформер і сімейство neural semi-CRF interval decoding, що й TransKun V2.
Результат: single-track piano MIDI. MIREX 2024 підсумок віддає перевагу V2 Aug, тоді як ряди Maestro note+offset+velocity і педалі трохи вищі для V2.

TransKun V2 Standard (checkpointMSimpler)

Використовує офіційний checkpoint Standard; закінчення нот відповідають акустичній тривалості, подовженій педаллю. Окремо від орієнтованого на відпускання клавіш NoExt і V2 Aug.

Yujia-Yan/TransKun source (pinned)TransKun official model cards transkun PyPI TransKun ISMIR 2024

Завантажте MIDI й перевірте висоти й тривалість нот у MIDI- чи нотному редакторі.

Aria-AMT piano-medium-double-1.0

Aria-AMT використовує маршрут EleutherAI seq-to-seq piano з piano-medium-double-1.0.safetensors.

EleutherAI/aria-amt Aria-MIDI HF dataset piano-medium-double-1.0.safetensors Aria-AMT paper

Обсяг: спеціалізований piano AMT для транскрипції piano нотного рівня.
Репозиторій Aria-AMT документує реалізацію транскрипції piano seq-to-seq та попередні ваги; у статті наведено порівняння MAESTRO/MAPS Table 1.

D3RM released checkpoint

Перетворює аудіо фортепіано на дискретні нотні події за допомогою опублікованого checkpoint D3RM із дифузійним уточненням та експортує редагований MIDI і дані нот.

D3RM source (pinned)Released checkpoints D3RM paper

Завантажте MIDI й перевірте висоти й тривалість нот у MIDI- чи нотному редакторі.

ByteDance Piano CRNN note+pedal

ByteDance Piano CRNN note+pedal використовує note_F1=0.9677_pedal_F1=0.9186.pth для соло-piano MIDI з подіями педального контролера.

bytedance/piano_transcription CRNN note/pedal checkpoint TelkNet music-to-midi workflow Piano transcription with pedals

Обсяг моделі: solo piano або клавіатурний матеріал, де важливі таймінг нот, швидкість і деталізація педалей.
Визначає натискання та відпускання педалі сустейну для перевірки в DAW або нотному редакторі; не визначає м’яку педаль (CC67) чи напівпедаль.
Форма виходу: одинарний piano MIDI з нотами, тривалістю, швидкістю та кривими керування педалями, які можна пізніше квантувати, редагувати та мікшувати.
Найкращий вхід: чистий solo piano з чіткою динамікою та стриманим реверберацією; Шум у кімнаті та додаткові інструменти роблять межі педалей менш надійними.
Фокус на огляді: щільні акорди, довгі сустейни, відчуття напівпедалі та резонанс низьких регістрів все ще заслуговують на ручну перевірку.

Порівняння моделей

Модель

Роль

Чому це використовується

Вплив на результат

МодельTransKun V2

Yujia-Yan/TransKun TransKun official model cards transkun PyPI TransKun ISMIR 2024

РольШвидкі та високоточні piano AMT

Чому це використовуєтьсяПублічні рядки MIREX роблять цей маршрут найчіткішим piano рейтингом у цьому каталозі.

Вплив на результатСоло piano MIDI

МодельByteDance Piano

bytedance/piano_transcription ByteDance paper

РольПедальний piano AMT

Чому це використовуєтьсяПідходить для записів, у яких потрібно редагувати ноти та час роботи педалі сустейну.

Вплив на результатPiano MIDI з педальними CC-заходами

МодельAria-AMT

EleutherAI/aria-amt Aria-MIDI HF dataset

РольSeq-to-seq piano AMT маршрут

Чому це використовуєтьсяСтаття Aria-AMT Таблиця 1 містить порівняння MAESTRO/MAPS; це не суперечка в таблиці лідерів MIREX.

Вплив на результатСоло piano MIDI

МодельTransKun V2 Aug

Yujia-Yan/TransKun TransKun V2 Aug checkpoint transkun PyPI TransKun ISMIR 2024 MIREX 2024 permanent results

РольМаршрут, навчений за допомогою аугментації TransKun

Чому це використовуєтьсяПорівняйте транскрипцію того самого запису з результатом TransKun V2, щоб вибрати варіант, ближчий до виконання.

Вплив на результатОдноколійна piano MIDI з V2 Aug checkpoint.

МодельAria-AMT piano-medium-double-1.0

EleutherAI/aria-amt Aria-MIDI HF dataset piano-medium-double-1.0.safetensors Aria-AMT paper

РольSeq-to-seq piano AMT маршрут

Вплив на результатСоло piano MIDI

МодельByteDance Piano CRNN note+pedal

bytedance/piano_transcription CRNN note/pedal checkpoint TelkNet music-to-midi workflow Piano transcription with pedals

РольПедальний piano AMT

Вплив на результатPiano MIDI з педальними CC-заходами

Бали стосуються лише вказаних даних, метрики й версії. Лідерство в таблиці не означає поточного світового рекорду чи результату цього сервісу. Можливості й тести можуть виправдати пріоритет моделі без зіставних балів.

Бенчмарк-графік: TransKun · MAESTRO V3 No Ext / TransKun · MAPS (ad hoc align) No Ext / TransKun · SMD No Ext / MIREX 2024 резюме piano таблиці лідерів транскрипції / MIREX 2024 Maestro piano ряди / Фортепіанні рядки MAPS MIREX 2024 / Фортепіанні рядки SMD MIREX 2024 / Стаття Aria-AMT: порівняння MAESTRO / MAPS / Фортепіано D3RM / ByteDance piano паперовий саундтрек

У таблиці наведено лише моделі з відкритими вагами або конфігураціями, які можна запускати локально.

TransKun · MAESTRO V3 No Ext

TransKun official model card — MAESTRO V3 No Ext

Значення взято для базового чекпойнта за посиланням, а не з нового вимірювання моделі, що працює тут.