С какими задачами Вокал в MIDI · Четыре модели (VocalParse 1.7B) может помочь?

MIDI / транскрипция; Выберите VocalParse, GAME, ROSVOT или SOME для нотной, устойчивой к аккомпанементу либо быстрой транскрипции вокала.; Полноценный поддерживаемый аудио- или видеофайл; выберите профиль модели, соответствующий источнику и желаемому результату.; Превратите полную запись в редактируемые ноты, удары барабана, табулатуру или временную шкалу аккордов.; Сравните выходные данные модели с исходный звук для проверки начала, границ и назначения источника.; Переместите MIDI и таблицы, выровненные по времени, в DAW, редактор нотаций или последующий рабочий процесс анализа.

Вокал в MIDI · Четыре модели (VocalParse 1.7B) · TelkNet

MIDI / транскрипцияGPU нагрузка

Вокал в MIDI · Четыре модели

Q: Для кого Вокал в MIDI · Четыре модели (VocalParse 1.7B)?

MIDI / транскрипция Выберите VocalParse, GAME, ROSVOT или SOME для нотной, устойчивой к аккомпанементу либо быстрой транскрипции вокала.

Q: Какие модели и ключевые слова связаны с Вокал в MIDI · Четыре модели (VocalParse 1.7B)?

VocalParse 1.7B, GAME, ROSVOT, SOME, VocalParse source (pinned), VocalParse weights (pinned), SingCrawl dataset source, VocalParse paper

Выберите VocalParse, GAME, ROSVOT или SOME для нотной, устойчивой к аккомпанементу либо быстрой транскрипции вокала.

5-20 кредитов/использованияВвод файловMax 100 MBОценка 45-1800 секунд

Вход

Полноценный поддерживаемый аудио- или видеофайл; выберите профиль модели, соответствующий источнику и желаемому результату.

Поддерживаемые форматы

mp3wavflacoggm4aaacaifaiffmp4movmkv

Результаты

Выберите VocalParse, GAME, ROSVOT или SOME для нотной, устойчивой к аккомпанементу либо быстрой транскрипции вокала.

Сценарий использования

Выберите VocalParse, GAME, ROSVOT или SOME для нотной, устойчивой к аккомпанементу либо быстрой транскрипции вокала.

Модели, параметры и источники

Выберите VocalParse, GAME, ROSVOT или SOME для нотной, устойчивой к аккомпанементу либо быстрой транскрипции вокала.

VocalParse 1.7BGAMEROSVOTSOMEVocalParse source (pinned)VocalParse weights (pinned)SingCrawl dataset sourceVocalParse paperGAME source (pinned)GAME v1.0.3 weightsGAME technical guide (pinned)GAME ONNX guide (pinned)

VocalParse 1.7B

Основной путь для структурированного вокального MIDI, близкого к нотной записи, из более чистого пения; у фиксированного чекпойнта нет официальных настраиваемых параметров инференса.

VocalParse source (pinned)VocalParse weights (pinned)SingCrawl dataset source VocalParse paper

Выделенный маршрут: этот инструмент использует выбранный путь модели для этого рабочего процесса.

GAME

GAME преобразует вокал в MIDI с официальными параметрами границ, D3PM и оценки. Язык по умолчанию автоматический/неуказанный; китайский не навязывается.

GAME source (pinned)GAME v1.0.3 weights GAME technical guide (pinned)GAME ONNX guide (pinned)

Автоматический режим использует официальный универсальный/неуказанный ID языка GAME 0. Выбирайте конкретный язык только когда язык вокала известен.
Порог сегментации — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Радиус сегментации (с) — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Начало D3PM — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Шаги D3PM — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Порог оценки — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
После инференса Beat This final0 записывает в MIDI корректный постоянный темп или покомпонентную карту темпа, сохраняя положение всех событий в секундах. Если корректные данные о долях получить нельзя, задача завершается ошибкой, а MIDI с темпом модели по умолчанию не выдаётся.

ROSVOT

Устойчивый путь для пения с шумом или проникновением аккомпанемента; текущий официальный чекпойнт обучен в основном на пении на путунхуа.

ROSVOT source (pinned)ROSVOT project page ROSVOT paper

Порог границы ноты — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Порог границы слова — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Проверять лиги — Официальный параметр модели; при сомнении оставьте значение по умолчанию.

SOME

SOME — быстрый и лёгкий путь преобразования вокала в MIDI. Публичных настроек модели нет; необязательная коррекция темпа MIDI выполняется после инференса.

SOME source (pinned)SOME baseline weights SOME technical guide (pinned)

После инференса Beat This final0 записывает в MIDI корректный постоянный темп или покомпонентную карту темпа, сохраняя положение всех событий в секундах. Если корректные данные о долях получить нельзя, задача завершается ошибкой, а MIDI с темпом модели по умолчанию не выдаётся.

Парный инструмент

Гитара, бас и сольные инструменты в MIDI · Basic Pitch

Преобразует запись отдельного инструмента в редактируемый MIDI и таблицу нот с поддержкой pitch bend.

Открыть Гитара, бас и сольные инструменты в MIDI · Basic Pitch

Парный инструмент

Разделение вокала и аккомпанемента

Позиционирование: open-weight, локально развёрнутое разделение двух stem vocal/аккомпанемент для практики, каверов, сведения и подготовки к сэмплированию.

Открыть Разделение вокала и аккомпанемента

Бумажные и эталонные заметки

VocalParse: Towards Unified and Scalable Singing Voice Transcription with Large Audio Language Models

arXiv - 2026

Paper

Robust Singing Voice Transcription Serves Synthesis

ACL - 2024

Paper

GAME: Generative Adaptive MIDI Extractor

Official technical guide - 2026

Technical guide (pinned)ONNX guide (pinned)v1.0.3 weights

SOME: Singing-Oriented MIDI Extractor

Official technical guide - 2023

Technical guide (pinned)Baseline weights

Официальные / хранилища

VocalParse source (pinned)VocalParse weights (pinned)SingCrawl dataset source GAME source (pinned)GAME v1.0.3 weights ROSVOT source (pinned)ROSVOT project page SOME source (pinned)SOME baseline weights

Статьи / технические заметки

VocalParse paper GAME technical guide (pinned)GAME ONNX guide (pinned)ROSVOT paper SOME technical guide (pinned)

Руководство по параметрам

Автоматический режим использует официальный универсальный/неуказанный ID языка GAME 0. Выбирайте конкретный язык только когда язык вокала известен.
Порог сегментации — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Радиус сегментации (с) — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Начало D3PM — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Шаги D3PM — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Порог оценки — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
После инференса Beat This final0 записывает в MIDI корректный постоянный темп или покомпонентную карту темпа, сохраняя положение всех событий в секундах. Если корректные данные о долях получить нельзя, задача завершается ошибкой, а MIDI с темпом модели по умолчанию не выдаётся.
Порог границы ноты — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Порог границы слова — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Проверять лиги — Официальный параметр модели; при сомнении оставьте значение по умолчанию.

Сценарии использования

Превратите полную запись в редактируемые ноты, удары барабана, табулатуру или временную шкалу аккордов.
Сравните выходные данные модели с исходный звук для проверки начала, границ и назначения источника.
Переместите MIDI и таблицы, выровненные по времени, в DAW, редактор нотаций или последующий рабочий процесс анализа.

Рабочий процесс

1Загрузите полный поддерживаемый файл, а не короткий тестовый фрагмент.
2Выберите профиль, соответствующий инструменту или задаче, затем настройте только элементы управления, предоставляемые этой официальной моделью.
3Проверьте предварительный просмотр исходного аудио и загрузите файлы результатов из завершенного задача.

Предполётный чек-лист

Не отправляйте плотный полный микс непосредственно в модель соло-инструмента; при необходимости сначала отделите целевой стебель.
Начните с опубликованных значений по умолчанию и измените пороговые значения только тогда, когда предварительный просмотр показывает определенную проблему с границей или фальшивой нотой.
Относитесь к транскрипции как к редактируемому черновику: время, длина ноты, аппликатура и границы аккордов все еще могут нуждаться в музыкальной коррекции.

Образцовые доказательства в этом забеге

Модели, параметры и источники

Выберите VocalParse, GAME, ROSVOT или SOME для нотной, устойчивой к аккомпанементу либо быстрой транскрипции вокала.

VocalParse 1.7B

Модель

Выделенный маршрут: этот инструмент использует выбранный путь модели для этого рабочего процесса.

VocalParse source (pinned)VocalParse weights (pinned)SingCrawl dataset source VocalParse paper

GAME

Модель

Автоматический режим использует официальный универсальный/неуказанный ID языка GAME 0. Выбирайте конкретный язык только когда язык вокала известен.
Порог сегментации — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Радиус сегментации (с) — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Начало D3PM — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Шаги D3PM — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Порог оценки — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
После инференса Beat This final0 записывает в MIDI корректный постоянный темп или покомпонентную карту темпа, сохраняя положение всех событий в секундах. Если корректные данные о долях получить нельзя, задача завершается ошибкой, а MIDI с темпом модели по умолчанию не выдаётся.

GAME source (pinned)GAME v1.0.3 weights GAME technical guide (pinned)GAME ONNX guide (pinned)

ROSVOT

Модель

Порог границы ноты — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Порог границы слова — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Проверять лиги — Официальный параметр модели; при сомнении оставьте значение по умолчанию.

ROSVOT source (pinned)ROSVOT project page ROSVOT paper

SOME

Модель

После инференса Beat This final0 записывает в MIDI корректный постоянный темп или покомпонентную карту темпа, сохраняя положение всех событий в секундах. Если корректные данные о долях получить нельзя, задача завершается ошибкой, а MIDI с темпом модели по умолчанию не выдаётся.

SOME source (pinned)SOME baseline weights SOME technical guide (pinned)

Эталонный график: Ошибки транскрипции VocalParse на Opencpop (таблица 1 статьи) / Устойчивость ROSVOT на чистом и зашумлённом аудио (таблица 1 статьи)

Ошибки транскрипции VocalParse на Opencpop (таблица 1 статьи)

VocalParse paper, Table 1

VocalParse, GAME, ROSVOT и SOME публикуют результаты на разных наборах данных и языках, с разными правилами разметки и допусками сопоставления. Проверенного общего публичного протокола для всех четырёх развёрнутых контрольных точек нет, поэтому сводный рейтинг не выдумывается.

Бумажные и эталонные заметки	Модель	MAE_pitch ↓	Подробные метрики
Эталонный текст + временные метки SOFA	ROSVOTTelkNetPaper Table 1	0.38	MAE_note ↓0.45MAE_duration ↓0.40MAE_note-count ↓0.20
Только аудио	VocalParse 1.7BTelkNetPaper Table 1	0.56	MAE_note ↓0.44MAE_duration ↓0.34MAE_note-count ↓0.11
Аудио + эталонный текст	VocalParse 1.7BTelkNetPaper Table 1	0.35	MAE_note ↓0.43MAE_duration ↓0.33MAE_note-count ↓0.11

Устойчивость ROSVOT на чистом и зашумлённом аудио (таблица 1 статьи)

ROSVOT paper, Table 1

Бумажные и эталонные заметки	Модель	COnPOff F1 (%)	Подробные метрики
Чистое	ROSVOTTelkNetPaper Table 1	77.4	COn F1 (%)94.0COff F1 (%)94.5Pitch AOR (%)97.0Melody RPA (%)87.6
Шум MUSAN	ROSVOTTelkNetPaper Table 1	77.0	COn F1 (%)93.8COff F1 (%)94.4Pitch AOR (%)97.1Melody RPA (%)87.4

Проверка бенчмарка

GAME

Руководство по параметрам

Автоматический режим использует официальный универсальный/неуказанный ID языка GAME 0. Выбирайте конкретный язык только когда язык вокала известен.
Порог сегментации — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Радиус сегментации (с) — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Начало D3PM — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Шаги D3PM — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Порог оценки — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
После инференса Beat This final0 записывает в MIDI корректный постоянный темп или покомпонентную карту темпа, сохраняя положение всех событий в секундах. Если корректные данные о долях получить нельзя, задача завершается ошибкой, а MIDI с темпом модели по умолчанию не выдаётся.
Порог границы ноты — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Порог границы слова — Официальный параметр модели; при сомнении оставьте значение по умолчанию.
Проверять лиги — Официальный параметр модели; при сомнении оставьте значение по умолчанию.

Статьи / технические заметки

VocalParse source (pinned)VocalParse weights (pinned)SingCrawl dataset source VocalParse paper GAME source (pinned)GAME v1.0.3 weights GAME technical guide (pinned)GAME ONNX guide (pinned)ROSVOT source (pinned)ROSVOT project page ROSVOT paper SOME source (pinned)SOME baseline weights SOME technical guide (pinned)

Демо

25時の情熱

Выберите VocalParse, GAME, ROSVOT или SOME для нотной, устойчивой к аккомпанементу либо быстрой транскрипции вокала.

Предпросмотр MIDI

VocalParse 1.7B

MIDI-результат

На техническом обслуживании

Этот инструмент находится на техническом обслуживании. Пожалуйста, попробуйте позже.

Быстрый отзыв

Напишите здесь своё предложение или пожелание и отправьте. Мы внимательно слушаем каждый голос и стараемся воплощать хорошие идеи в реальные функции.