Çok enstrümanlı MIDI transkripsiyonu (YourMT3+) · TelkNet

MIDI / transkripsiyonGPU iş yükü

Çok enstrümanlı MIDI transkripsiyonu (YourMT3+)

Hızlı bir şekilde tam bir karışımdan düzenlenebilir MIDI'ye ihtiyaç duyan kullanıcılar

Puanlama, düzenleme, armoni analizi ve DAW temizleme için çoklu enstrüman MIDI taslakları

3 kredi/kullanımSes dosyası girişiMaksimum 50 MBTahmini 180-900 saniye

Giriş

YourMT3+ AMT yolu aracılığıyla tam şarkılar, topluluklar veya çoklu enstrüman demoları

Ses formatları

mp3wavflacoggm4aaac

Çıkış

Puanlama, düzenleme, armoni analizi ve DAW temizleme için çoklu enstrüman MIDI taslakları

Şunun için en iyisi:

Hızlı bir şekilde tam bir karışımdan düzenlenebilir MIDI'ye ihtiyaç duyan kullanıcılar

Modeller, parametreler ve kaynaklar

Çok enstrümanlı MIDI transkripsiyonu (YourMT3+) tam miks çok enstrümanlı transkripsiyon için resmi YourMT3+ checkpoint ailesini kullanır.

YourMT3+

Tam mikslerde veya demolarda çoklu enstrümanın otomatik müzik transkripsiyonu için YourMT3+ kontrol noktaları.

mimbres/YourMT3 TelkNet music-to-midi adapter YourMT3 arXiv MT3 arXiv 2025 AMT Challenge paper Official leaderboard

Mimari: Tam miksajlar ve demolar için transformatör tabanlı çok enstrümanlı AMT.
Şunlar için önerilir: kaynak yalnızca piyano olmadığında geniş çoklu enstrüman transkripsiyonu.
Çıkışlar: enstrüman odaklı parçalarla düzenlenebilir çok kanallı MIDI.

Model karşılaştırması

Modeli

Rol

Neden kullanılıyor?

Çıktı etkisi

ModeliMIROS

amt-os/ai4m-miros 2025 AMT Challenge paper Official leaderboard

RolAlternatif AMT arka ucu

Neden kullanılıyor?İkinci bir transkripsiyon arka ucu, bir kaynak için daha iyi bir taslak sağladığında kullanışlıdır.

Çıktı etkisiAlternatif çok enstrümanlı MIDI taslağı

ModeliYourMT3+ YPTF.MoE+Multi

mimbres/YourMT3 YourMT3 arXiv 2025 AMT Challenge paper Official leaderboard

RolVarsayılan akıllı transkripsiyon yolu

Neden kullanılıyor?YourMT3+, Smart Music tarafından sunulan ana tam karışım transkripsiyon rotasıdır.

Çıktı etkisiDüzenlenebilir çok kanallı MIDI taslağı

ModeliMT3 baseline

MT3 arXiv 2025 AMT Challenge paper Official leaderboard

RolAraştırma temel bağlamı

Neden kullanılıyor?MT3, çoklu cihaz AMT'si için bağlam sağlar, ancak etkin varsayılan yol değildir.

Çıktı etkisiReferans çoklu enstrüman transkripsiyon davranışı

Herkese açık karşılaştırma tablosu

Puanlar genel MVSep veya kıyaslama referans satırlarıdır. Yüklenen dosyada yeni bir TelkNet çalışması değiller.

AMT mücadelesi bağlamı

Official leaderboard

Zorluk satırları halka açık çoklu enstrüman transkripsiyon bağlamını sağlar; puanlar veri kümesine ve değerlendirme protokolüne bağlıdır.

MIROS#1

F1 % 59.98Hassasiyet %'si 65.58%'yi geri çağır 57.24Örtüşme %'si 73.91Çalışma zamanı (kaynak birim) 22.05

MIROS, genel kıyaslama bağlamının faydalı olduğu alternatif bir çok cihazlı AMT arka ucu olarak listelenmiştir.

YourMT3-YPTF-MoE-M#2

F1 % 59.38Hassasiyet %'si 60.10%'yi geri çağır 58.88Örtüşme %'si 73.05Çalışma zamanı (kaynak birim) 12.60

MT3 baseline#5

F1 % 39.32

MT3, aktif TelkNet varsayılanı değil, çoklu enstrüman transkripsiyon davranışı için temel bir referanstır.

Basic Pitch#14

F1 % 6.34

YourMT3+ çoklu enstrüman içeriği

YourMT3+ paper

YourMT3+ satırları Slakh tarzı karışımlarda çoklu enstrüman transkripsiyon içeriğini gösterir.

YPTF.MoE+Multi (PS)YourMT3+

Başlangıç F1 % 84.60Ofset F1 % 70.70Tambur F1 % 90.10

PerceiverTFpaper baseline

Başlangıç F1 % 81.90Tambur F1 % 78.30

MT3paper baseline

Başlangıç F1 % 76.00Ofset F1 % 57.00

Makale ve karşılaştırma notları

YourMT3+: Multi-instrument Music Transcription

IEEE MLSP - 2024

YourMT3+, tam ses karışımlarını MIDI parçalarına dönüştürmek için çok enstrümanlı AMT bağlamı sağlar.

arXiv:2407.04822

MT3: Multi-Task Multitrack Music Transcription

ICLR - 2022

MT3, AMT davranışını anlamaya yönelik çok görevli, çok kanallı bir müzik transkripsiyon referans modelidir.

arXiv:2111.03017

Advancing Multi-Instrument Music Transcription: Results from the 2025 AMT Challenge

arXiv / OpenReview - 2026

AMT sorgulama referansı, sistemler ve veri kümeleri arasında çoklu cihaz transkripsiyon karşılaştırma bağlamı sağlar.

arXiv:2603.27528

Resmi / depolar

mimbres/YourMT3 TelkNet music-to-midi adapter

Makaleler / teknik notlar

YourMT3 arXiv MT3 arXiv 2025 AMT Challenge paper Official leaderboard

Parametre kılavuzu

YourMT3 checkpoint: gelişmiş Colab selector; varsayılan, upstream Space önerisi YPTF.MoE+Multi (noPS) kullanır.

Kullanım örnekleri

Demoların tamamını yazıya dökün ve uyumu analiz edin
Fikir kayıtlarını düzenlenebilir MIDI'ye dönüştürün
Çok kanallı taslaklarla başlayın, ardından DAW'da enstrümana göre hassaslaştırın

İş akışı

1Sabit bir tempoya sahip tam bir ses dosyası yükleyin
2Çoklu enstrüman algılamanın MIDI üretmesini bekleyin
3Hızı, nicelemeyi ve izleri düzeltmek için sonucu DAW'nıza aktarın

Uçuş öncesi kontrol listesi

Sesi sabit bir tempoda tutun ve uzun sessiz sürelerden kaçının
Daha karmaşık düzenlemelerin ardından daha fazla manuel not düzeltmesi gerekir
Solo piyano için bunun yerine piyano uzmanı modeline geçin

Bu aracı kullanmak için oturum açmanız gerekiyor

Çalışma alanınızda dosya yüklemek, görevleri göndermek ve sonuçları incelemek için oturum açın veya bir hesap oluşturun.

Tarama aracı bilgileri her zaman ücretsizdir; hesaba gerek yoktur.