Що таке Piano TransKun V2 Aug?

Piano MIDI з окремого V2 Aug checkpoint, корисний для порівняння з стандартним маршрутом V2

Для кого Piano TransKun V2 Aug?

MIDI / транскрипція Piano MIDI з окремого V2 Aug checkpoint, корисний для порівняння з стандартним маршрутом V2

З якими завданнями Piano TransKun V2 Aug може допомогти?

MIDI / транскрипція; Piano MIDI з окремого V2 Aug checkpoint, корисний для порівняння з стандартним маршрутом V2; Порівняння поруч із стандартною версією V2, щоб оцінити, чи краще доповнений checkpoint підходить до запису; Сольний piano або для однієї клавіатури; TransKun V2 Aug — це публічний checkpoint з посиленими підсумковими метриками MIREX; Порівняйте версії V2 і V2 Aug MIDI на одному piano; Спробуйте варіант MIREX summary-leading TransKun для ширшого узагальнення

Piano TransKun V2 Aug

Q: Які моделі та ключові слова пов'язані з Piano TransKun V2 Aug?

TransKun V2 Aug, Yujia-Yan/TransKun, TransKun V2 Aug checkpoint, transkun PyPI, TransKun ISMIR 2024, MIREX 2024 permanent results, TransKun V2, Aria-AMT

Моделі, параметри та джерела

TransKun V2 Aug — це окремий локальний маршрут транскрипції piano з використанням офіційного checkpoint доповнення даних. Подайте файл piano для генерації MIDI, не замінюючи стандартний інструмент V2.

TransKun V2 AugYujia-Yan/TransKunTransKun V2 Aug checkpointtranskun PyPITransKun ISMIR 2024MIREX 2024 permanent resultsTransKun V2Aria-AMTEleutherAI/aria-amtAria-MIDI HF datasetMIREX 2024 summaryhFT-Transformer

TransKun V2 Aug

TransKun V2 Aug — це окремий локальний маршрут checkpoint доповнення даних із використанням checkpointTransformerAug.zip.

Yujia-Yan/TransKun TransKun V2 Aug checkpoint transkun PyPI TransKun ISMIR 2024 MIREX 2024 permanent results

Архітектура: TransKun V2 Aug використовує той самий неієрархічний Трансформер і сімейство neural semi-CRF interval decoding, що й TransKun V2.
Runtime: використовує checkpointMSimplerAug/checkpoint.pt plus model.conf, витягнутий з checkpointTransformerAug.zip, а не пакетований ресурс V2 2.0.pt.
Результат: single-track piano MIDI. MIREX 2024 підсумок віддає перевагу V2 Aug, тоді як ряди Maestro note+offset+velocity і педалі трохи вищі для V2.

Порівняння моделей

Модель

Роль

Чому це використовується

Вплив на результат

МодельTransKun V2 Aug

Yujia-Yan/TransKun TransKun V2 Aug checkpoint transkun PyPI TransKun ISMIR 2024 MIREX 2024 permanent results

РольМаршрут, навчений за допомогою аугментації TransKun

Чому це використовуєтьсяНайкраще, коли хочеш базову лінію MIREX, що лідирує TransKun підсумку, як окрему серію, а не тихо замінювати V2.

Вплив на результатОдноколійна piano MIDI з V2 серпня checkpoint.

МодельTransKun V2

Yujia-Yan/TransKun MIREX 2024 permanent results

РольШвидкі та високоточні piano AMT

Чому це використовуєтьсяПублічні рядки MIREX роблять цей маршрут найчіткішим piano рейтингом у цьому каталозі.

Вплив на результатСоло piano MIDI

МодельAria-AMT

EleutherAI/aria-amt Aria-MIDI HF dataset

РольSeq-to-seq piano AMT маршрут

Чому це використовуєтьсяСтаття Aria-AMT Таблиця 1 містить порівняння MAESTRO/MAPS; це не суперечка в таблиці лідерів MIREX.

Вплив на результатСоло piano MIDI

Публічна таблиця лідерів: MIREX 2024 резюме piano таблиці лідерів транскрипції / MIREX 2024 Maestro piano ряди / Фортепіанні рядки MAPS MIREX 2024 / Фортепіанні рядки SMD MIREX 2024

Обсяг відкритих локально розгортаних моделей: таблиці містять лише рядки з перевіреними доступними для завантаження вагами або конфігураціями та шляхом локального запуску. SOTA й «Найкращий» стосуються тільки показаних перевірених рядків, не включають хостовані, лише API чи комерційні системи й не є універсальним рейтингом.

MIREX 2024 резюме piano таблиці лідерів транскрипції

MIREX 2024 permanent results

Підсумкові рядки MIREX порівнюють середній початок нот F1 у трьох наборах даних і цілісну ноту F1 між Maestro і SMD.

Ранг	Модель	Holistic note F1 (%)	Докладні метрики
MIREX 2024 summary	TransKun V2 AugTelkNetMIREX 2024 permanent results	90.81SOTA	Summary onset F1 (%)96.48Найкращий
MIREX 2024 summary	TransKun V2MIREX 2024 permanent results	87.64	Summary onset F1 (%)94.90
MIREX 2024 summary	hFT-TransformerMIREX 2024 permanent results	83.59	Summary onset F1 (%)94.16

MIREX 2024 Maestro piano ряди

MIREX 2024 permanent results

Публічні piano транскрипційні спори на Maestro. Значення відображаються у відсотках для читабельності.

Ранг	Модель	Нота + швидкість F1 %	Докладні метрики
MIREX 2024 published row	TransKun V2MIREX 2024 permanent results	92.96SOTA	F1 активації (%)95.30НайкращийПочаток ноти F1 %98.32Зсув ноти F1 %93.49НайкращийF1 активації педалі (%)95.41НайкращийПочаток педалі F1 %86.42НайкращийF1 початку+завершення педалі (%)83.77Найкращий
MIREX 2024 published row	TransKun V2 AugTelkNetMIREX 2024 permanent results	92.64	F1 активації (%)95.05Початок ноти F1 %98.40НайкращийЗсув ноти F1 %93.14F1 активації педалі (%)94.54Початок педалі F1 %84.53F1 початку+завершення педалі (%)81.02
MIREX 2024 published row	hFT-TransformerMIREX 2024 permanent results	89.48	F1 активації (%)93.07Початок ноти F1 %97.45Зсув ноти F1 %90.45

Фортепіанні рядки MAPS MIREX 2024

MIREX 2024 permanent results

Повний набір публічних рядків MAPS з результатів MIREX 2024 для поліфонічної транскрипції.

Ранг	Модель	Початок ноти F1 %	Докладні метрики
MIREX 2024 published row	TransKun V2 AugTelkNetMIREX 2024 permanent results	92.19SOTA	F1 активації (%)88.43НайкращийЗсув ноти F1 %69.75НайкращийНота + швидкість F1 %54.95НайкращийF1 активації педалі (%)85.83НайкращийПочаток педалі F1 %73.43НайкращийF1 початку+завершення педалі (%)55.32Найкращий
MIREX 2024 published row	TransKun V2MIREX 2024 permanent results	88.49	F1 активації (%)85.35Зсув ноти F1 %64.61Нота + швидкість F1 %44.46F1 активації педалі (%)84.49Початок педалі F1 %67.32F1 початку+завершення педалі (%)50.88
MIREX 2024 published row	hFT-TransformerMIREX 2024 permanent results	87.89	F1 активації (%)80.19Зсув ноти F1 %57.19Нота + швидкість F1 %36.12

Фортепіанні рядки SMD MIREX 2024

MIREX 2024 permanent results

Повний набір публічних рядків SMD з результатів MIREX 2024 для поліфонічної транскрипції.

Ранг	Модель	Початок ноти F1 %	Докладні метрики
MIREX 2024 published row	TransKun V2 AugTelkNetMIREX 2024 permanent results	98.84SOTA	F1 активації (%)94.48НайкращийЗсув ноти F1 %92.05НайкращийНота + швидкість F1 %88.97НайкращийF1 активації педалі (%)94.47НайкращийПочаток педалі F1 %83.83F1 початку+завершення педалі (%)78.37Найкращий
MIREX 2024 published row	TransKun V2MIREX 2024 permanent results	97.90	F1 активації (%)93.40Зсув ноти F1 %89.90Нота + швидкість F1 %82.32F1 активації педалі (%)94.20Початок педалі F1 %83.88НайкращийF1 початку+завершення педалі (%)77.30
MIREX 2024 published row	hFT-TransformerMIREX 2024 permanent results	97.13	F1 активації (%)91.15Зсув ноти F1 %86.92Нота + швидкість F1 %77.69

Парний інструмент

Коли вибирати V2, а коли V2 Aug?

Для різних реальних записів і тембрів фортепіано спершу обирайте TransKun V2 Aug. Для чистого фортепіано, коли найважливіші відпускання клавіш, динаміка й педаль, звичайний V2 може бути кращим. V2 No Pedal Ext зберігає довжину ноти до фактичного відпускання клавіші без продовження педаллю. Жодна версія не перемагає за всіма метриками, але обидві належать до найповніших, найзріліших і найкраще підтверджених відкритих рішень для сольного фортепіано.

Відкрити Piano TransKun V2

Паперові та бенчмаркові нотатки

Scoring Time Intervals Using Non-Hierarchical Transformer for Automatic Piano Transcription

ISMIR - 2024

Стаття TransKun V2 повідомляє про архітектуру інтервального оцінювання трансформера та вищий результат F1 на підзавданнях Maestro.

arXiv:2404.09466

Skipping the Frame-Level: Event-Based Piano Transcription with Neural Semi-CRFs

NeurIPS - 2021

Стаття Semi-CRF 2021 року piano транскрипцію як інтервально/подійне передбачення, а не як зшивання детекторів на рівні кадру.

OpenReview

Офіційні / репозиторії

Yujia-Yan/TransKun TransKun V2 Aug checkpoint transkun PyPI

Статті / технічні нотатки

TransKun ISMIR 2024 MIREX 2024 permanent results

Керівництво параметрів

Соло piano: ці моделі призначені для запису на чистих piano або клавішних.

Piano TransKun V2 Aug

Моделі, параметри та джерела

TransKun V2 Aug

Порівняння моделей

Публічна таблиця лідерів: MIREX 2024 резюме piano таблиці лідерів транскрипції / MIREX 2024 Maestro piano ряди / Фортепіанні рядки MAPS MIREX 2024 / Фортепіанні рядки SMD MIREX 2024

MIREX 2024 резюме piano таблиці лідерів транскрипції

MIREX 2024 Maestro piano ряди

Фортепіанні рядки MAPS MIREX 2024

Фортепіанні рядки SMD MIREX 2024

Паперові та бенчмаркові нотатки

Scoring Time Intervals Using Non-Hierarchical Transformer for Automatic Piano Transcription

Skipping the Frame-Level: Event-Based Piano Transcription with Neural Semi-CRFs

Офіційні / репозиторії

Статті / технічні нотатки

Керівництво параметрів

Сценарії використання

Робочий процес

Передпольотний чек-лист

Пов'язані сценарії

Для використання цього інструменту потрібен вхід