MuScriptor Çoklu Enstrüman Transkripsiyon nedir?

MuScriptor-large ile karışık bir kaydı çok enstrümanlı MIDI'ye dönüştürün; Girişleri mp3 / wav / flac gibi formatlarda destekler

Kimin için MuScriptor Çoklu Enstrüman Transkripsiyon?

MIDI / transkripsiyon MuScriptor-large ile karışık bir kaydı çok enstrümanlı MIDI'ye dönüştürün; Girişleri mp3 / wav / flac gibi formatlarda destekler

Hangi görevlerde yardımcı olabilir MuScriptor Çoklu Enstrüman Transkripsiyon?

MIDI / transkripsiyon; MuScriptor-large ile karışık bir kaydı çok enstrümanlı MIDI'ye dönüştürün; Girişleri mp3 / wav / flac gibi formatlarda destekler; Desteklenen giriş formatlarının materyalinizle eşleşip eşleşmediğini kontrol edin; Çıktının mevcut iş akışınıza uyup uymadığını doğrulayın; Toplu işlemin mantıklı olup olmadığına karar vermek için runtime ve kredileri tartın

MuScriptor Çoklu Enstrüman Transkripsiyon

Q: Hangi model ve anahtar kelime varlıkları MuScriptor Çoklu Enstrüman Transkripsiyon ile bağlantılıdır?

MuScriptor-large, MuScriptor source (pinned), MuScriptor-large weights (pinned), MuScriptor paper, MuScriptor Table 1, D_Test / CFG=1, Paper Table 1, YourMT3+

MuScriptor-large

Bu rota yalnızca amiral gemisi MuScriptor-large checkpointini sunar; small, medium veya quantized fallback yoktur.

MuScriptor source (pinned)MuScriptor-large weights (pinned)MuScriptor paper

Kesin kimlik: 1.366.399.488 F32 parametre; 5.465.642.136 bayt safetensors; revision 8809fdfbed2affa7ade94a7059e746e3880720e7.
48 katmanlı, 1536 genişlikli ve 24 başlı decoder-only Transformer; 16 kHz mono, 5 saniyelik parçalar ve 100 Hz’de 512-bin mel.
Type-1 çok kanallı MIDI üretir; 35 UI etiketi 36 öğrenilmiş gruba eşlenir. Velocity 100 olarak sabit kalır. İşleme sırasında kaynağın BPM değeri otomatik olarak algılanıp yazılır. Tamamlandıktan sonra oynatma hızı ve BPM önizleme kontrolünden değiştirilebilir; indirme, kontrolün geçerli ayarını kullanır. Kaynaktaki tempo değişimleri yeniden oluşturulmaz.

Kıyaslama tablosu: Yazarların bildirdiği MuScriptor-large karşılaştırması / Sekiz açık veri kümesinde MuScriptor ve YourMT3+ / MuScriptor model ölçeği ablasyonu

Açık kaynak ve yerel dağıtım kapsamı: bu tablolar yalnızca indirilebilir ağırlıkları veya yapılandırmaları ve yerel kurulum yolu doğrulanmış satırları içerir. SOTA ve En iyi, gösterilen doğrulanmış satırlar içinde geçerlidir; barındırılan, yalnızca API sunan veya ticari sistemleri kapsamaz ve evrensel bir sıralama değildir.

Yazarların bildirdiği MuScriptor-large karşılaştırması

MuScriptor Table 1

Makale, aynı özel D_Test üzerinde son CFG=1 modelini YourMT3+ ile karşılaştırır. Sonuçlar bağımsız olarak tekrarlanmamıştır ve MIROS ya da başka protokollerle doğrudan karşılaştırılamaz.

Değerlendirme koşulu	Model	Çok enstrümanlı F1 (%)	Ayrıntılı metrikler
D_Test / CFG=1	MuScriptor-largeTelkNetPaper Table 1	48.20SOTA	Başlangıç F1 (%)60.40En iyiKare F1 (%)73.30En iyiBitiş F1 (%)49.00En iyiDavul F1 (%)50.20En iyi
D_Test / YPTF.MoE+Multi (noPS)	YourMT3+Paper Table 1	21.90	Başlangıç F1 (%)32.52Kare F1 (%)45.54Bitiş F1 (%)17.79Davul F1 (%)41.40

Sekiz açık veri kümesinde MuScriptor ve YourMT3+

MuScriptor Table 2

Makalenin Tablo 2’si, her iki eğitim kümesinin de dışında kalan sekiz veri kümesinde yayımlanmış ve yerel kurulabilen iki modeli değerlendirir. SOTA ve En iyi her veri kümesi içinde hesaplanır; aynı protokolde MIROS satırı bildirilmediği için eklenmez.

Değerlendirme koşulu	Model	Çok enstrümanlı F1 (%)	Ayrıntılı metrikler
Bach10	YourMT3+Paper Table 2	26.4	Başlangıç F1 (%)59.8En iyiKare F1 (%)66.0Bitiş F1 (%)48.0En iyi
Bach10	MuScriptor-largeTelkNetPaper Table 2	34.7SOTA	Başlangıç F1 (%)43.1Kare F1 (%)85.0En iyiBitiş F1 (%)36.0
Dagstuhl ChoirSet	YourMT3+Paper Table 2	2.6	Başlangıç F1 (%)22.3En iyiKare F1 (%)51.0Bitiş F1 (%)10.8
Dagstuhl ChoirSet	MuScriptor-largeTelkNetPaper Table 2	11.5SOTA	Başlangıç F1 (%)14.4Kare F1 (%)80.7En iyiBitiş F1 (%)11.5En iyi
PHENICX-Anechoic	YourMT3+Paper Table 2	12.2	Başlangıç F1 (%)56.7En iyiKare F1 (%)58.9Bitiş F1 (%)18.7
PHENICX-Anechoic	MuScriptor-largeTelkNetPaper Table 2	25.7SOTA	Başlangıç F1 (%)56.1Kare F1 (%)74.6En iyiBitiş F1 (%)32.6En iyi
RWC-P	YourMT3+Paper Table 2	19.1	Başlangıç F1 (%)36.1Kare F1 (%)51.6Bitiş F1 (%)20.6Davul F1 (%)36.5
RWC-P	MuScriptor-largeTelkNetPaper Table 2	25.6SOTA	Başlangıç F1 (%)46.1En iyiKare F1 (%)61.2En iyiBitiş F1 (%)25.6En iyiDavul F1 (%)42.1En iyi
RWC-C	YourMT3+Paper Table 2	40.5SOTA	Başlangıç F1 (%)71.7En iyiKare F1 (%)71.3En iyiBitiş F1 (%)44.3En iyiDavul F1 (%)8.7
RWC-C	MuScriptor-largeTelkNetPaper Table 2	36.0	Başlangıç F1 (%)67.7Kare F1 (%)70.5Bitiş F1 (%)36.9Davul F1 (%)23.7En iyi
RWC-G	YourMT3+Paper Table 2	17.2	Başlangıç F1 (%)36.9Kare F1 (%)49.4Bitiş F1 (%)20.5Davul F1 (%)25.6
RWC-G	MuScriptor-largeTelkNetPaper Table 2	23.7SOTA	Başlangıç F1 (%)44.7En iyiKare F1 (%)58.7En iyiBitiş F1 (%)24.4En iyiDavul F1 (%)29.2En iyi
RWC-J	YourMT3+Paper Table 2	26.4	Başlangıç F1 (%)52.9Kare F1 (%)57.2Bitiş F1 (%)31.1Davul F1 (%)30.6
RWC-J	MuScriptor-largeTelkNetPaper Table 2	31.8SOTA	Başlangıç F1 (%)59.4En iyiKare F1 (%)62.7En iyiBitiş F1 (%)33.9En iyiDavul F1 (%)31.3En iyi
RWC-R	YourMT3+Paper Table 2	23.1SOTA	Başlangıç F1 (%)46.1Kare F1 (%)61.5Bitiş F1 (%)28.6En iyiDavul F1 (%)51.3En iyi
RWC-R	MuScriptor-largeTelkNetPaper Table 2	20.3	Başlangıç F1 (%)47.1En iyiKare F1 (%)68.6En iyiBitiş F1 (%)24.8Davul F1 (%)36.5

MuScriptor model ölçeği ablasyonu

MuScriptor Table 4

Tablo 4 yalnızca D_Real eğitimi ve aynı özel D_Test’i kullanır. Satır boyutları makaledeki etiketlerdir; açık checkpointlerin kesin parametre sayıları değildir.

Makale ve kıyaslama notları	Model	Çok enstrümanlı F1 (%)	Ayrıntılı metrikler
D_Real only / conditioning on	MuScriptor 60MPaper Table 4	35.2	Başlangıç F1 (%)47.7Kare F1 (%)65.7Bitiş F1 (%)35.3Davul F1 (%)39.8
D_Real only / conditioning on	MuScriptor 100MPaper Table 4	38.2	Başlangıç F1 (%)51.2Kare F1 (%)67.2Bitiş F1 (%)38.7Davul F1 (%)41.5
D_Real only / conditioning on	MuScriptor 300MPaper Table 4	39.7	Başlangıç F1 (%)52.4Kare F1 (%)68.0Bitiş F1 (%)40.3Davul F1 (%)42.0
D_Real only / conditioning on	MuScriptor 1.3BPaper Table 4	40.5	Başlangıç F1 (%)53.2Kare F1 (%)68.7Bitiş F1 (%)41.0Davul F1 (%)42.5

Resmi / depolar

MuScriptor source (pinned)MuScriptor-large weights (pinned)MuScriptor paper

Makaleler / teknik notlar

Kamuya açık bir kağıt bağlantısı listelenmemiştir; Resmi depoyu veya runtime uygulamasını kaynak olarak kullanın.

MuScriptor Çoklu Enstrüman Transkripsiyon

Modeller, parametreler ve kaynaklar

MuScriptor-large

Kıyaslama tablosu: Yazarların bildirdiği MuScriptor-large karşılaştırması / Sekiz açık veri kümesinde MuScriptor ve YourMT3+ / MuScriptor model ölçeği ablasyonu

Yazarların bildirdiği MuScriptor-large karşılaştırması

Sekiz açık veri kümesinde MuScriptor ve YourMT3+

MuScriptor model ölçeği ablasyonu

Resmi / depolar

Makaleler / teknik notlar

Parametre rehberi

Kullanım Durumları

İş Akışı

Uçuş öncesi kontrol listesi

Hızlı geri bildirim