MuScriptor: An Open Model for Multi-Instrument Music Transcription
arXiv - 2026
حوّل الموسيقى إلى MIDI لعدة آلات باستخدام MuScriptor-large.
جار التحميل...
حوّل الأغاني والعزف الجماعي إلى MIDI متعدد المسارات لتصحيح النوتات وتحرير الأجزاء في DAW.
المدخلات
يدعم المدخلات بصيغ مثل mp3 / wav / flac / ogg / m4a / aac / aif / aiff / mp4 / mov / mkv
الصيغ المدعومة
الإنتاج
MIDI
حالة الاستخدام
تحرير النوتات والتوزيع الآلي وتفاصيل الأداء.
اختر نموذجًا يناسب المادة والغرض، وراجع الأمثلة قبل الإرسال.
تعتمد التكلفة والمدة والصيغ والمعلمات على النموذج المختار.
اذكر اسم الأداة والخطوات والمشكلة في ملاحظاتك. يمكن أن تساعد لقطات الشاشة في تحديدها.
الإصلاح الافتراضي يقلل أخطاء الآلات بين المقاطع ويحفظ النغمات الممتدة؛ ابدأ به للمزيج الكامل.
YourMT3+ · YPTF.MoE+Multi noPS: مسودات MIDI قابلة للتعديل من المكسجات الكاملة، بالإضافة إلى مدخلات منفردة/آلات عامة أنظف مثل piano/لوحة المفاتيح، guitar، bass، drums، آلات الوتر/النفخ، ومسودات vocal
YMT3+: مسودات MIDI قابلة للتعديل من المكسجات الكاملة، بالإضافة إلى مدخلات منفردة/آلات عامة أنظف مثل piano/لوحة المفاتيح، guitar، bass، drums، آلات الوتر/النفخ، ومسودات vocal
YourMT3+ · YPTF.Single noPS: مسودات MIDI قابلة للتعديل من المكسجات الكاملة، بالإضافة إلى مدخلات منفردة/آلات عامة أنظف مثل piano/لوحة المفاتيح، guitar، bass، drums، آلات الوتر/النفخ، ومسودات vocal
YourMT3+ · YPTF.Multi PS: مسودات MIDI قابلة للتعديل من المكسجات الكاملة، بالإضافة إلى مدخلات منفردة/آلات عامة أنظف مثل piano/لوحة المفاتيح، guitar، bass، drums، آلات الوتر/النفخ، ومسودات vocal
YourMT3+ · YPTF.MoE+Multi PS: مسودات MIDI قابلة للتعديل من المكسجات الكاملة، بالإضافة إلى مدخلات منفردة/آلات عامة أنظف مثل piano/لوحة المفاتيح، guitar، bass، drums، آلات الوتر/النفخ، ومسودات vocal
MIROS MusicFM multi-decoder يدير المسار الرسمي لل MIROS المحلي مع pretrained_msd.pt بالإضافة إلى last.ckpt checkpoint المضبوطة بدقة.
BS-RoFormer SW Fixed يستخدم BS-Rofo-SW-Fixed.ckpt بالإضافة إلى BS-Rofo-SW-Fixed.yaml لتقسيم مزيج كامل إلى six WAV stems.
يتعرف OaFS على 34 فئة من الآلات ويصدر MIDI وجداول النوتات بشدة ثابتة قدرها 127.
يجمع النغمات في عدد محدد من مسارات الطابع الصوتي غير المسماة دون تحديد أسماء الآلات. يناسب المجموعات القصيرة ذات العدد المعروف من الآلات؛ وقد يتعذر فصل الأجزاء المتداخلة بالنغمة نفسها.
يفصل الغناء والطبول والباس والغيتار والبيانو والأصوات الأخرى، ثم ينسخ النغمات ويدمج MIDI. يمكن تقدير القوة وإعادة تعيين الآلات؛ وقد تؤثر أخطاء الفصل في النغمات.
يفصل ستة مسارات ثم يدوّن MIDI. يكتشف SheetSage2-Refined النبضات والميزان والأقسام، ويكتشف Tsumugi الأوتار والسلم. يبقى خيار تدوين الأغنية كاملة بالطريقة السابقة متاحًا.
arXiv - 2026
حوّل الموسيقى إلى MIDI لعدة آلات باستخدام MuScriptor-large.
IEEE MLSP - 2024
يمتد YourMT3+ ل MT3 مع بنية محولات محسنة، وأنواع MoE، وفك الترميز متعدد القنوات، و cross-dataset stem augmentation.
ICLR - 2022
أسس MT3 نسخ الموسيقى متعددة المسارات متعدد المهام مع نمذجة التسلسلات ولا يزال الأساس المسمى لمقارنات AMT الأحدث.
arXiv / OpenReview - 2026
تم إصدار ورقة ملخص تحدي AMT لعام 2025 في 29 مارس 2026 لمسابقة 1 يناير - 30 أبريل 2025. يبلغ عن وجود 21 فريقا مسجلا، و14 فريقا قدما، و8 فرق صحيحة تم تسجيلها، ومجموعة اختبار كلاسيكية مكونة من 76 قطعة مع ما يصل إلى ثلاث آلات لكل مقتطف.
Signals - 2026
يتعرف OaFS على 34 فئة من الآلات ويصدر MIDI وجداول النوتات بشدة ثابتة قدرها 127.
يتضمن نتائج الاختبارات المنشورة للنماذج المستخدمة هنا وخارج الموقع. يُعرض جدول المصدر كاملًا افتراضيًا، ويمكن اختيار الشروط والمقاييس للمقارنة. لا يمكن مقارنة درجات اختبارات أُجريت بشروط مختلفة مباشرةً.
تُعرض فقط السجلات ذات تنفيذ استدلال عام وأوزان مطابقة تم التحقق منها، إضافةً إلى الخوارزميات التي لا تحتاج إلى أوزان. تُستبعد الخدمات المغلقة والأوزان غير المنشورة ونسخ التجارب غير المطابقة. هذا ليس ترتيبًا شاملًا لكل النماذج.
نشر الأوزان لا يثبت وجود ترخيص مفتوح المصدر كامل. وسّع البيانات للاطلاع على تراخيص الأوزان المعلنة وشروط الوصول. تُميّز التراخيص غير المعلنة بصورة منفصلة.
لا تتوفر للنموذج المحدد نتيجة عامة مطابقة تم التحقق منها، لذا لم يُمنح ترتيبًا.
اختر مجموعة بيانات لعرض جميع مقاييس كل نموذج. تُرتّب الصفوف حسب الترتيب الرسمي أو المقياس المحدد. يميّز الخط العريض أفضل قيمة قابلة للمقارنة في كل عمود، بما في ذلك التعادل. تُرتّب بروتوكولات التقييم المختلفة بشكل منفصل، وتُعرض الدرجات المفقودة بعلامة -.
قابلة للنشر 3 / صفوف المصدر 7
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
𝒟 Synth · MuScriptor trained on · 1 · 𝒟 Synth · MuScriptor trained on · 2 · 𝒟 Synth + 𝒟 Real · MuScriptor trained on · 1 · 𝒟 Synth + 𝒟 Real · MuScriptor trained on · 2
على مجموعة D_Test الخاصة نفسها، تقارن الورقة النموذج النهائي عند CFG=1 مع YourMT3+. لم تُعَد النتائج بصورة مستقلة، ولا يجوز مقارنتها مباشرةً مع MIROS أو بروتوكولات تقييم أخرى.
| الترتيب حسب المقياس | النموذج | شرط الاختبار | F1 Score ( ↑ ) | ||||
|---|---|---|---|---|---|---|---|
| Onset | Frame | Offset | Drums | Multi | |||
| 1 | MuScriptor (1.3B) · 𝒟 Synth + 𝒟 Real + 𝒟 RLالأوزان العامة · شيفرة الاستدلالmodel.safetensorsشيفرة الاستدلالترخيص الأوزان (إعلان المستودع): cc-by-nc-4.0يلزم قبول الشروط أو طلب الوصول | D_Test · CFG = 1 | 60.4 | 73.3 | 49.0 | 50.2 | 48.2 |
| 2 | YourMT3+ (YPTF.MoE+Multi (noPS)) | D_Test · CFG = 1 | 32.52 | 45.54 | 17.79 | 41.4 | 21.9 |
تُفصل مجموعات البيانات والإصدارات والشروط، وتُحفظ المصادر التي لا تحتوي على صفوف مؤهلة أيضاً.
قابلة للنشر 3 / صفوف المصدر 7
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
𝒟 Synth · MuScriptor trained on · 1 · 𝒟 Synth · MuScriptor trained on · 2 · 𝒟 Synth + 𝒟 Real · MuScriptor trained on · 1 · 𝒟 Synth + 𝒟 Real · MuScriptor trained on · 2
قابلة للنشر 16 / صفوف المصدر 16
قابلة للنشر 0 / صفوف المصدر 4
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
MuScriptor (60M) · MuScriptor (100M) · MuScriptor (300M) · MuScriptor (1.3B)
قابلة للنشر 9 / صفوف المصدر 17
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
GIU · press_to_win · press_to_win5 · press_to_win3 · press_to_win4 · Bytedance Piano transcription · press_to_win2 · Midnight Questor
قابلة للنشر 9 / صفوف المصدر 14
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
press_to_win 1 · press_to_win 2 · press_to_win 3 · Bytedance Piano · press_to_win 4
قابلة للنشر 9 / صفوف المصدر 9
قابلة للنشر 1 / صفوف المصدر 5
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
MT3 (our colab) · MT3 (colab ) · MT3 · PerceiverTF
قابلة للنشر 1 / صفوف المصدر 7
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
YMT3 · noPS · YMT3+ · noPS | PS · YPTF+S · noPS | PS · YPTF+M · noPS | PS · MT3 [ 1 ] · (colab) · AMT · Baseline *
قابلة للنشر 1 / صفوف المصدر 12
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
YMT3 base · + Intra-aug. · + Full-vocab. · + Data balancing · + Cross-aug. · + PTF-encoder · + FFN → MoE · + Multi decoder · MT3 (colab) · MT3 [ 1 ] · PerceiverTF [ 25 ]
قابلة للنشر 10 / صفوف المصدر 25
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
OaFS-ResUnet · Frame F1 (%) · OaFS-CFP · Frame F1 (%) · OaFS-single · Frame F1 (%) · OaFS-ResUnet · Onset F1 (%) · OaFS-CFP · Onset F1 (%) · OaFS-single · Onset F1 (%) · OaFS-ResUnet · Multi-Instrument Frame F1 (%) · OaFS-CFP · Multi-Instrument Frame F1 (%) · OaFS-single · Multi-Instrument Frame F1 (%) · OaFS-ResUnet · Multi-Instrument Onset F1 (%) · OaFS-CFP · Multi-Instrument Onset F1 (%) · OaFS-single · Multi-Instrument Onset F1 (%) · OaFS-ResUnet · Instrument Detection F1 (%) · OaFS-CFP · Instrument Detection F1 (%) · OaFS-single · Instrument Detection F1 (%)
قابلة للنشر 68 / صفوف المصدر 102
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
OaFS-Single · Acoustic Piano · OaFS-Single · Electric Piano · OaFS-Single · Chromatic Percussion · OaFS-Single · Organ · OaFS-Single · Acoustic Guitar · OaFS-Single · Clean Electric Guitar · OaFS-Single · Distorted Electric Guitar · OaFS-Single · Acoustic Bass · OaFS-Single · Electric Bass · OaFS-Single · Violin · OaFS-Single · Viola · OaFS-Single · Cello · OaFS-Single · Contrabass · OaFS-Single · Orchestral Harp · OaFS-Single · Timpani · OaFS-Single · String Ensemble · OaFS-Single · Synth Strings · OaFS-Single · Choir and Voice · OaFS-Single · Trumpet · OaFS-Single · Trombone · OaFS-Single · Tuba · OaFS-Single · French Horn · OaFS-Single · Brass Section · OaFS-Single · Soprano/Alto Sax · OaFS-Single · Tenor Sax · OaFS-Single · Baritone Sax · OaFS-Single · Oboe · OaFS-Single · English Horn · OaFS-Single · Bassoon · OaFS-Single · Clarinet · OaFS-Single · Pipe · OaFS-Single · Synth Lead · OaFS-Single · Synth Pad · OaFS-Single · Drums
قابلة للنشر 28 / صفوف المصدر 28
قابلة للنشر 2 / صفوف المصدر 5
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
OaFS-ResUnet · OaFS-CFP · OaFS-single
قابلة للنشر 3 / صفوف المصدر 7
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
D16 · MSE · Syn · Rescale
تخص الدرجات مجموعة البيانات والمقياس وإصدار النموذج المذكورة؛ لا تجوز المقارنة المباشرة بين اختبارات مختلفة.
يعرض الجدول فقط النماذج التي تتوافر لها أوزان أو إعدادات عامة ويمكن تشغيلها محليًا.
اختر مجموعة بيانات لعرض جميع مقاييس كل نموذج. تُرتّب الصفوف حسب الترتيب الرسمي أو المقياس المحدد. يميّز الخط العريض أفضل قيمة قابلة للمقارنة في كل عمود، بما في ذلك التعادل. تُرتّب بروتوكولات التقييم المختلفة بشكل منفصل، وتُعرض الدرجات المفقودة بعلامة -.
قابلة للنشر 3 / صفوف المصدر 7
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
𝒟 Synth · MuScriptor trained on · 1 · 𝒟 Synth · MuScriptor trained on · 2 · 𝒟 Synth + 𝒟 Real · MuScriptor trained on · 1 · 𝒟 Synth + 𝒟 Real · MuScriptor trained on · 2
على مجموعة D_Test الخاصة نفسها، تقارن الورقة النموذج النهائي عند CFG=1 مع YourMT3+. لم تُعَد النتائج بصورة مستقلة، ولا يجوز مقارنتها مباشرةً مع MIROS أو بروتوكولات تقييم أخرى.
| الترتيب حسب المقياس | النموذج | شرط الاختبار | F1 Score ( ↑ ) | ||||
|---|---|---|---|---|---|---|---|
| Onset | Frame | Offset | Drums | Multi | |||
| 1 | MuScriptor (1.3B) · 𝒟 Synth + 𝒟 Real + 𝒟 RLالأوزان العامة · شيفرة الاستدلالmodel.safetensorsشيفرة الاستدلالترخيص الأوزان (إعلان المستودع): cc-by-nc-4.0يلزم قبول الشروط أو طلب الوصول | D_Test · CFG = 1 | 60.4 | 73.3 | 49.0 | 50.2 | 48.2 |
| 2 | YourMT3+ (YPTF.MoE+Multi (noPS)) | D_Test · CFG = 1 | 32.52 | 45.54 | 17.79 | 41.4 | 21.9 |
يعرض الجدول فقط النماذج التي تتوافر لها أوزان أو إعدادات عامة ويمكن تشغيلها محليًا.
اختر مجموعة بيانات لعرض جميع مقاييس كل نموذج. تُرتّب الصفوف حسب الترتيب الرسمي أو المقياس المحدد. يميّز الخط العريض أفضل قيمة قابلة للمقارنة في كل عمود، بما في ذلك التعادل. تُرتّب بروتوكولات التقييم المختلفة بشكل منفصل، وتُعرض الدرجات المفقودة بعلامة -.
قابلة للنشر 16 / صفوف المصدر 16
يقيّم الجدول 2 في الورقة النموذجين المنشورين والقابلين للتشغيل محليًا على ثماني مجموعات لم تدخل في تدريب أي منهما.
| الترتيب حسب المقياس | النموذج | شرط الاختبار | F1 Score ( ↑ ) | ||||
|---|---|---|---|---|---|---|---|
| Onset | Frame | Offset | Drums | Multi | |||
| 1 | MuScriptorالأوزان العامة · شيفرة الاستدلالmodel.safetensorsشيفرة الاستدلالترخيص الأوزان (إعلان المستودع): cc-by-nc-4.0يلزم قبول الشروط أو طلب الوصول | Bach10 | 43.1 | 85.0 | 36.0 | - | 34.7 |
| 2 | YourMT3+ | Bach10 | 59.8 | 66.0 | 48.0 | - | 26.4 |
يعرض الجدول فقط النماذج التي تتوافر لها أوزان أو إعدادات عامة ويمكن تشغيلها محليًا.
اختر مجموعة بيانات لعرض جميع مقاييس كل نموذج. تُرتّب الصفوف حسب الترتيب الرسمي أو المقياس المحدد. يميّز الخط العريض أفضل قيمة قابلة للمقارنة في كل عمود، بما في ذلك التعادل. تُرتّب بروتوكولات التقييم المختلفة بشكل منفصل، وتُعرض الدرجات المفقودة بعلامة -.
قابلة للنشر 9 / صفوف المصدر 17
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
GIU · press_to_win · press_to_win5 · press_to_win3 · press_to_win4 · Bytedance Piano transcription · press_to_win2 · Midnight Questor
النماذج مفتوحة المصدر القابلة لإعادة الإنتاج من لوحة الصدارة الرسمية، مع الحفاظ على ترتيبها الرسمي. تُعرض F1 والدقة والاسترجاع والبداية والنهاية والتداخل كنسب مئوية، والوقت بالمللي ثانية. يستخدم إعداد YourMT3+ الخاص بالمسابقة معلومات الآلات الواردة في أسماء الملفات؛ ولا تمثل درجته قياسًا لسلسلة المعالجة الكاملة في هذا الموقع.
| الترتيب الرسمي | النموذج | Members | Submission date | Runtime (ms) | F-measure (summary)↑ | Precision↑ | Recall↑ | Average overlap ratio↑ | F-measure (details)↑ | Onset precision↑ | Onset recall↑ | Onset F-measure↑ | Offset precision↑ | Offset recall↑ | Offset F-measure↑ |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 1 | MIROS (Music Information Retrieval Osnabrück)الأوزان العامة · شيفرة الاستدلالMIROS fine-tuned decoderMusicFM encoderشيفرة الاستدلال logs/Multi_longer_seq_length_frozen_enc_silu/le2bzt53/checkpoints/last.ckptإعدادات التقييملم يُعلن ترخيص الأوزان | Deniz Gün, Fernando Riveros, Paul Koesling, Anish Haluvani Sundresh, William Shelor | 2025-06-02 | 22.0535 | 0.5999 | 0.655839 | 0.5724 | 0.739079 | 0.599875 | 0.877975 | 0.759886 | 0.799196 | 0.807888 | 0.701962 | 0.736779 |
| 2 | YourMT3-YPTF-MoE-M | Sungkyun Chang, Simon Dixon, Emmanouil Benetos | 2025-06-03 | 12.5981 | 0.5939 | 0.600966 | 0.588778 | 0.730518 | 0.593868 | 0.792573 | 0.777088 | 0.783356 | 0.767444 | 0.750847 | 0.757675 |
| 3 | YourMT3-YPTF-S | Sungkyun Chang, Simon Dixon, Emmanouil Benetos | 2025-06-02 | 15.3954 | 0.5582 | 0.556491 | 0.561459 | 0.732617 | 0.55816 | 0.762297 | 0.771807 | 0.76566 | 0.743591 | 0.753287 | 0.747136 |
| 4 | YourMT3-P | Sungkyun Chang, Simon Dixon, Emmanouil Benetos | 2025-06-02 | 14.9916 | 0.3948 | 0.39658 | 0.398548 | 0.72627 | 0.394752 | 0.60259 | 0.613207 | 0.601815 | 0.685018 | 0.691227 | 0.681928 |
| 5 | MT3الأوزان العامة · شيفرة الاستدلال | Google Research Brain Team: Josh Gardner, Ian Simon, Ethan Manilow, Curtis Hawthorne, Jesse Engel | 2025-06-02 | 20.1915 | 0.3932 | 0.38112 | 0.411528 | 0.71797 | 0.393214 | 0.663145 | 0.726103 | 0.687734 | 0.63501 | 0.698339 | 0.659656 |
| 7 | YourMT3-YPTF-SP-Vالأوزان العامة · شيفرة الاستدلال | Sungkyun Chang, Simon Dixon, Emmanouil Benetos | 2025-06-02 | 14.5031 | 0.3306 | 0.32796 | 0.335827 | 0.714713 | 0.330591 | 0.632511 | 0.657221 | 0.641741 | 0.686195 | 0.711273 | 0.695724 |
| 10 | YourMT3-YPTF-MoE-MP | Sungkyun Chang, Simon Dixon, Emmanouil Benetos | 2025-06-02 | 16.0262 | 0.2173 | 0.214966 | 0.220641 | 0.611634 | 0.217338 | 0.696075 | 0.719896 | 0.70555 | 0.699835 | 0.72405 | 0.709509 |
| 15 | ReconVATالأوزان العامة · شيفرة الاستدلال | Kin Wai Cheuk, Dorien Herremans, Li Su | 2025-06-02 | 5.4548 | 0.1416 | 0.121534 | 0.180252 | 0.789788 | 0.141598 | 0.307451 | 0.450635 | 0.35515 | 0.478656 | 0.742044 | 0.564281 |
| 16 | Basic Pitchالأوزان العامة · شيفرة الاستدلال | Spotify's Audio Intelligence Lab: Rachel M. Bittner, Juan José Bosch, David Rubinstein, Gabriel Meseguer-Brocal, Sebastian Ewert | 2025-06-02 | 3.9056 | 0.0634 | 0.054995 | 0.078152 | 0.597734 | 0.063433 | 0.264086 | 0.337363 | 0.290772 | 0.444662 | 0.587456 | 0.495507 |
يعرض الجدول فقط النماذج التي تتوافر لها أوزان أو إعدادات عامة ويمكن تشغيلها محليًا.
اختر مجموعة بيانات لعرض جميع مقاييس كل نموذج. تُرتّب الصفوف حسب الترتيب الرسمي أو المقياس المحدد. يميّز الخط العريض أفضل قيمة قابلة للمقارنة في كل عمود، بما في ذلك التعادل. تُرتّب بروتوكولات التقييم المختلفة بشكل منفصل، وتُعرض الدرجات المفقودة بعلامة -.
قابلة للنشر 9 / صفوف المصدر 14
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
press_to_win 1 · press_to_win 2 · press_to_win 3 · Bytedance Piano · press_to_win 4
الموقع والورقة نسختان منفصلتان مع اختلافات صغيرة في الرقم الأخير. يضم الاختبار 76 مقطعاً تركيبياً مقيداً، بثلاث آلات كحد أقصى لكل مقطع. تُحفظ قيم كل مصدر. يستخدم إعداد YourMT3+ الخاص بالمسابقة معلومات الآلات الواردة في أسماء الملفات؛ ولا تمثل درجته قياسًا لسلسلة المعالجة الكاملة في هذا الموقع.
| الترتيب الرسمي | النموذج | F1 Score↑ | Precision↑ | Recall↑ | Overlap↑ | Runtime |
|---|---|---|---|---|---|---|
| 1 | MIROSالأوزان العامة · شيفرة الاستدلالMIROS fine-tuned decoderMusicFM encoderشيفرة الاستدلال logs/Multi_longer_seq_length_frozen_enc_silu/le2bzt53/checkpoints/last.ckptإعدادات التقييملم يُعلن ترخيص الأوزان | 0.5998 | 0.6558 | 0.5724 | 0.7391 | 22.05 |
| 2 | YourMT3-YPTF-MoE-M | 0.5938 | 0.6010 | 0.5888 | 0.7305 | 12.60 |
| 3 | YourMT3-YPTF-S | 0.5581 | 0.5565 | 0.5615 | 0.7326 | 15.40 |
| 4 | YourMT3-P | 0.3947 | 0.3966 | 0.3985 | 0.7263 | 14.99 |
| 5 | MT3 (baseline)الأوزان العامة · شيفرة الاستدلال | 0.3932 | 0.3811 | 0.4115 | 0.7180 | 20.19 |
| 6 | YourMT3-YPTF-SP-Vالأوزان العامة · شيفرة الاستدلال | 0.3305 | 0.3280 | 0.3358 | 0.7147 | 14.50 |
| 9 | YourMT3-YPTF-MoE-MP | 0.2173 | 0.2150 | 0.2206 | 0.6116 | 16.03 |
| 13 | ReconVATالأوزان العامة · شيفرة الاستدلال | 0.1415 | 0.1215 | 0.1803 | 0.7898 | 5.45 |
| 14 | Basic Pitchالأوزان العامة · شيفرة الاستدلال | 0.0634 | 0.0550 | 0.0782 | 0.5977 | 3.91 |
يعرض الجدول فقط النماذج التي تتوافر لها أوزان أو إعدادات عامة ويمكن تشغيلها محليًا.
اختر مجموعة بيانات لعرض جميع مقاييس كل نموذج. تُرتّب الصفوف حسب الترتيب الرسمي أو المقياس المحدد. يميّز الخط العريض أفضل قيمة قابلة للمقارنة في كل عمود، بما في ذلك التعادل. تُرتّب بروتوكولات التقييم المختلفة بشكل منفصل، وتُعرض الدرجات المفقودة بعلامة -.
قابلة للنشر 9 / صفوف المصدر 9
يجمع Table 2 حسب العدد الدقيق للآلات ويعرض المتوسط ± الانحراف المعياري. تُرتب المجموعات منفصلة ولا تستبدل الجدول العام. يستخدم إعداد YourMT3+ الخاص بالمسابقة معلومات الآلات الواردة في أسماء الملفات؛ ولا تمثل درجته قياسًا لسلسلة المعالجة الكاملة في هذا الموقع.
| الترتيب حسب المقياس | النموذج | شرط الاختبار | F-measure↑ | Precision↑ | Recall↑ |
|---|---|---|---|---|---|
| 1 | YourMT3-YPTF-MoE-M | Count = 1 (n=6) | 0.7594 ± 0.2304 | 0.7858 ± 0.2411 | 0.7367 ± 0.2254 |
| 2 | MIROSالأوزان العامة · شيفرة الاستدلالMIROS fine-tuned decoderMusicFM encoderشيفرة الاستدلال logs/Multi_longer_seq_length_frozen_enc_silu/le2bzt53/checkpoints/last.ckptإعدادات التقييملم يُعلن ترخيص الأوزان | Count = 1 (n=6) | 0.7193 ± 0.2103 | 0.9067 ± 0.2286 | 0.6233 ± 0.2295 |
| 3 | MT3 (Baseline)الأوزان العامة · شيفرة الاستدلال | Count = 1 (n=6) | 0.5483 ± 0.3898 | 0.5548 ± 0.3974 | 0.5422 ± 0.3829 |
اختر مجموعة بيانات لعرض جميع مقاييس كل نموذج. تُرتّب الصفوف حسب الترتيب الرسمي أو المقياس المحدد. يميّز الخط العريض أفضل قيمة قابلة للمقارنة في كل عمود، بما في ذلك التعادل. تُرتّب بروتوكولات التقييم المختلفة بشكل منفصل، وتُعرض الدرجات المفقودة بعلامة -.
قابلة للنشر 1 / صفوف المصدر 5
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
MT3 (our colab) · MT3 (colab ) · MT3 · PerceiverTF
مقارنة ورقة YourMT3+ مع القواعد الأساسية لعائلة MT3 على مقاييس أسلوب سلاخ.
| الترتيب حسب المقياس | النموذج | Bass↑ | Brass↑ | C.Perc↑ | Guitar↑ | Organ↑ | Piano↑ | Pipe↑ | Reed↑ | Strings and Ens.↑ | Synth Lead↑ | Synth Pad↑ | Drums↑ | Onset F1 (non-drum)↑ | Offset F1 (non-drum)↑ | Onset F1 (drums/gm)↑ | Multi (Onset-Offset) F1 ♠↑ | Multi Onset F1↑ |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| - | YPTF.MoE+M (PS) | 93.20 | 74.96 | 67.70 | 82.27 | 73.48 | 88.84 | 74.72 | 82.22 | 75.44 | 84.19 | 45.57 | 90.05 | 84.56 | 70.70 | 90.05 | 74.84 | - |
اختر مجموعة بيانات لعرض جميع مقاييس كل نموذج. تُرتّب الصفوف حسب الترتيب الرسمي أو المقياس المحدد. يميّز الخط العريض أفضل قيمة قابلة للمقارنة في كل عمود، بما في ذلك التعادل. تُرتّب بروتوكولات التقييم المختلفة بشكل منفصل، وتُعرض الدرجات المفقودة بعلامة -.
قابلة للنشر 1 / صفوف المصدر 7
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
YMT3 · noPS · YMT3+ · noPS | PS · YPTF+S · noPS | PS · YPTF+M · noPS | PS · MT3 [ 1 ] · (colab) · AMT · Baseline *
| الترتيب حسب المقياس | النموذج | شرط الاختبار | MAPS [ 21 ] (unseen) · Piano | MAPS [ 21 ] (seen) | Maestro v3 | MusicNet ext. (EM) [ 10 ] | MusicNet ext. [ 9 , 10 ] | MIR-ST500 [ 13 ] (SVS) · Singing | MIR-ST500 [ 13 ] | MIR-ST500 (100ms [ 20 ] ) | ENSTdrums (DTP [ 15 ] ) · Drums | ENSTdrums (DTM [ 15 ] ) | GuitarSet [ 11 ] (MT3 [ 1 ] ) · Guitar | URMP [ 22 ] Onset F1 [ 1 ] · Agnostic | URMP [ 22 ] Multi F1 [ 1 ] · Ensemble | Slakh [ 18 ] Onset F1 [ 1 ] · Agnostic | Slakh [ 18 ] Multi F1 [ 1 ] · All | ||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Strings↑ | Winds↑ | Strings↑ | Winds↑ | ||||||||||||||||
| - | YPTF.MoE+M | noPS | PS | 87.88 | 86.25 | - | 96.98 | 96.52 | 91.32 | 90.07 | 83.46 | 78.50 | 66.14 | 66.09 | 55.95 | 55.33 | 71.60 | 72.05 | 70.59 | 71.07 | 81.14 | 82.08 | 88.79 | 89.48 | 85.92 | 87.27 | 91.65 | 88.87 | 81.05 | 81.79 | 67.22 | 67.98 | 84.14 | 84.56 | 73.98 | 74.84 |
اختر مجموعة بيانات لعرض جميع مقاييس كل نموذج. تُرتّب الصفوف حسب الترتيب الرسمي أو المقياس المحدد. يميّز الخط العريض أفضل قيمة قابلة للمقارنة في كل عمود، بما في ذلك التعادل. تُرتّب بروتوكولات التقييم المختلفة بشكل منفصل، وتُعرض الدرجات المفقودة بعلامة -.
قابلة للنشر 1 / صفوف المصدر 12
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
YMT3 base · + Intra-aug. · + Full-vocab. · + Data balancing · + Cross-aug. · + PTF-encoder · + FFN → MoE · + Multi decoder · MT3 (colab) · MT3 [ 1 ] · PerceiverTF [ 25 ]
| الترتيب حسب المقياس | النموذج | Onset F1↑ | Offset F1↑ | Drum F1↑ |
|---|---|---|---|---|
| - | YPTF.MoE+Multi | 84.6 | 70.7 | 90.1 |
اختر مجموعة بيانات لعرض جميع مقاييس كل نموذج. تُرتّب الصفوف حسب الترتيب الرسمي أو المقياس المحدد. يميّز الخط العريض أفضل قيمة قابلة للمقارنة في كل عمود، بما في ذلك التعادل. تُرتّب بروتوكولات التقييم المختلفة بشكل منفصل، وتُعرض الدرجات المفقودة بعلامة -.
قابلة للنشر 10 / صفوف المصدر 25
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
OaFS-ResUnet · Frame F1 (%) · OaFS-CFP · Frame F1 (%) · OaFS-single · Frame F1 (%) · OaFS-ResUnet · Onset F1 (%) · OaFS-CFP · Onset F1 (%) · OaFS-single · Onset F1 (%) · OaFS-ResUnet · Multi-Instrument Frame F1 (%) · OaFS-CFP · Multi-Instrument Frame F1 (%) · OaFS-single · Multi-Instrument Frame F1 (%) · OaFS-ResUnet · Multi-Instrument Onset F1 (%) · OaFS-CFP · Multi-Instrument Onset F1 (%) · OaFS-single · Multi-Instrument Onset F1 (%) · OaFS-ResUnet · Instrument Detection F1 (%) · OaFS-CFP · Instrument Detection F1 (%) · OaFS-single · Instrument Detection F1 (%)
يقارن الجدول الرسمي 5 خمس مجموعات بيانات منفصلة، ويعرض فقط التجارب ذات الأوزان العامة المطابقة المتحقق منها. النموذج الحالي OaFS مدرب تدريبًا مشتركًا؛ ولا تثبت النتائج تفوقه على MuScriptor.
| الترتيب حسب المقياس | النموذج | شرط الاختبار | Frame F1 (%)↑ | Onset F1 (%)↑ | Multi-Instrument Frame F1 (%)↑ | Multi-Instrument Onset F1 (%)↑ | Instrument Detection F1 (%)↑ |
|---|---|---|---|---|---|---|---|
| 1 | MT3الأوزان العامة · شيفرة الاستدلالOfficial MT3 T5X checkpoint and 294 tensor filesشيفرة الاستدلالإعدادات التقييملم يُعلن ترخيص الأوزان | MAESTRO | 55.30 | 95.16 | 55.30 | 95.16 | 99.72 |
| 2 | OaFSالأوزان العامة · شيفرة الاستدلال | MAESTRO | 76.10 | 94.17 | 76.10 | 94.17 | 100 |
اختر مجموعة بيانات لعرض جميع مقاييس كل نموذج. تُرتّب الصفوف حسب الترتيب الرسمي أو المقياس المحدد. يميّز الخط العريض أفضل قيمة قابلة للمقارنة في كل عمود، بما في ذلك التعادل. تُرتّب بروتوكولات التقييم المختلفة بشكل منفصل، وتُعرض الدرجات المفقودة بعلامة -.
قابلة للنشر 68 / صفوف المصدر 102
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
OaFS-Single · Acoustic Piano · OaFS-Single · Electric Piano · OaFS-Single · Chromatic Percussion · OaFS-Single · Organ · OaFS-Single · Acoustic Guitar · OaFS-Single · Clean Electric Guitar · OaFS-Single · Distorted Electric Guitar · OaFS-Single · Acoustic Bass · OaFS-Single · Electric Bass · OaFS-Single · Violin · OaFS-Single · Viola · OaFS-Single · Cello · OaFS-Single · Contrabass · OaFS-Single · Orchestral Harp · OaFS-Single · Timpani · OaFS-Single · String Ensemble · OaFS-Single · Synth Strings · OaFS-Single · Choir and Voice · OaFS-Single · Trumpet · OaFS-Single · Trombone · OaFS-Single · Tuba · OaFS-Single · French Horn · OaFS-Single · Brass Section · OaFS-Single · Soprano/Alto Sax · OaFS-Single · Tenor Sax · OaFS-Single · Baritone Sax · OaFS-Single · Oboe · OaFS-Single · English Horn · OaFS-Single · Bassoon · OaFS-Single · Clarinet · OaFS-Single · Pipe · OaFS-Single · Synth Lead · OaFS-Single · Synth Pad · OaFS-Single · Drums
| الترتيب حسب المقياس | النموذج | شرط الاختبار | Total Number of Notes | Frame F1 (%)↑ | Onset F1 (%)↑ |
|---|---|---|---|---|---|
| 1 | OaFSالأوزان العامة · شيفرة الاستدلال | Acoustic Piano | 974,080 | 65.90 | 71.37 |
| 2 | MT3الأوزان العامة · شيفرة الاستدلالOfficial MT3 T5X checkpoint and 294 tensor filesشيفرة الاستدلالإعدادات التقييملم يُعلن ترخيص الأوزان | Acoustic Piano | 974,080 | 56.90 | 66.08 |
اختر مجموعة بيانات لعرض جميع مقاييس كل نموذج. تُرتّب الصفوف حسب الترتيب الرسمي أو المقياس المحدد. يميّز الخط العريض أفضل قيمة قابلة للمقارنة في كل عمود، بما في ذلك التعادل. تُرتّب بروتوكولات التقييم المختلفة بشكل منفصل، وتُعرض الدرجات المفقودة بعلامة -.
قابلة للنشر 28 / صفوف المصدر 28
| الترتيب حسب المقياس | النموذج | شرط الاختبار | Frame F1 (%)↑ | Onset F1 (%)↑ |
|---|---|---|---|---|
| 1 | OaFSالأوزان العامة · شيفرة الاستدلال | Piano | 70.36 | 72.10 |
| 2 | MT3الأوزان العامة · شيفرة الاستدلالOfficial MT3 T5X checkpoint and 294 tensor filesشيفرة الاستدلالإعدادات التقييملم يُعلن ترخيص الأوزان | Piano | 63.12 | 69.99 |
اختر مجموعة بيانات لعرض جميع مقاييس كل نموذج. تُرتّب الصفوف حسب الترتيب الرسمي أو المقياس المحدد. يميّز الخط العريض أفضل قيمة قابلة للمقارنة في كل عمود، بما في ذلك التعادل. تُرتّب بروتوكولات التقييم المختلفة بشكل منفصل، وتُعرض الدرجات المفقودة بعلامة -.
قابلة للنشر 2 / صفوف المصدر 5
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
OaFS-ResUnet · OaFS-CFP · OaFS-single
| الترتيب حسب المقياس | النموذج | Number of Trainable Parameters | Number of Instrument Classes Excluding “Others” |
|---|---|---|---|
| - | MT3الأوزان العامة · شيفرة الاستدلالOfficial MT3 T5X checkpoint and 294 tensor filesشيفرة الاستدلالإعدادات التقييملم يُعلن ترخيص الأوزان | 93.7 M | 34 |
| - | OaFSالأوزان العامة · شيفرة الاستدلال | 64.9 M | 34 |
اختر مجموعة بيانات لعرض جميع مقاييس كل نموذج. تُرتّب الصفوف حسب الترتيب الرسمي أو المقياس المحدد. يميّز الخط العريض أفضل قيمة قابلة للمقارنة في كل عمود، بما في ذلك التعادل. تُرتّب بروتوكولات التقييم المختلفة بشكل منفصل، وتُعرض الدرجات المفقودة بعلامة -.
قابلة للنشر 3 / صفوف المصدر 7
لم تُتحقق حزمة استدلال عامة كاملة لهذه التجارب. لا تحل أوزان أخرى تحمل اسم النموذج نفسه محلها.
D16 · MSE · Syn · Rescale
الجدول 3 من البحث: K هو عدد الطبائع الصوتية المحدد. يُحسب F1 لكل مسار بعد المطابقة المثلى. النتائج متوسط ثلاثة تدريبات على الأقل وليست قياسًا جديدًا لأوزان هذا الموقع.
| الترتيب حسب المقياس | النموذج | BACH10 2 mix | BACH10 3 mix | BACH10 4 mix | URMP 2 mix | URMP 3 mix | ||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| F FS↑ | F S↑ | ratio↑ | F FS↑ | F S↑ | ratio↑ | F FS↑ | F S↑ | ratio↑ | F FS↑ | F S↑ | ratio↑ | F FS↑ | F S↑ | ratio↑ | ||
| 1 | Oursالأوزان العامة · شيفرة الاستدلال | 83.4 | 84.6 | 99.0 | 77.8 | 80.1 | 96.7 | 66.2 | 72.7 | 89.9 | 68.9 | 66.8 | 82.6 | 58.5 | 60.0 | 77.1 |
| 2 | Shareالأوزان العامة · شيفرة الاستدلالseptimbre/ablation/DicephNet/dicephnet_model.pthشيفرة الاستدلالإعدادات التقييملم يُعلن ترخيص الأوزان | 82.1 | 83.0 | 98.4 | 76.1 | 78.9 | 96.6 | 68.5 | 72.8 | 91.0 | 69.0 | 68.3 | 84.6 | 57.2 | 57.5 | 74.1 |
| 3 | Tanakaالأوزان العامة · شيفرة الاستدلال | 77.9 | 79.6 | 93.2 | 66.1 | 69.0 | 83.4 | 55.4 | 59.2 | 73.2 | 65.5 | 64.1 | 79.3 | 56.5 | 56.5 | 72.8 |
اعثر على طرق المعالجة والخطوات المناسبة لمادتك.
ملاحظة إصلاح من TelkNet · 13 أغسطس 2026
شغّلنا الأغنية الكاملة نفسها عبر TelkNet وعبر الوضع الصارم في MuScriptor Large 0.3.0 الرسمي. أعطى الاثنان 8 أجزاء و6560 نغمة، مع تطابق الجزء والطبقة والترتيب لكل نغمة. يظهر الخلل بين الثانية 182 و222 تقريبًا: ما زال المصدر يحتوي على خط لحني واضح في الترددات المتوسطة والعالية، لكن MIDI يترك فراغًا يقارب 40.31 ثانية فوق C4. لم تحذف الواجهة أو معالجة BPM أو محرر MIDI هذه النغمات؛ فالفراغ موجود أصلًا في خرج النموذج الرسمي. ومن دون النوتة الأصلية لا يمكننا تحديد عدد النغمات المفقودة بدقة.
يضبط TelkNet انتقال معلومات الآلات بين المقاطع ذات الخمس ثوانٍ لتقليل انتشار أخطاء التصنيف وربط النغمات الممتدة بين المقاطع. ينسخ MuScriptor Large كل مقطع مرة واحدة.
بعد ذلك أكملنا 16 تشغيلًا كاملًا على 14 أغنية، وانتهت كلها بصورة طبيعية. في الأغنية الأولى تقلّص أطول فراغ لبدايات النغمات فوق C4 من 40.309 إلى 1.970 ثانية. وفي الثانية تغيّر الخرج من 1698 نغمة على 6 مسارات نشطة، بنسبة بيانو 70.79%، إلى 2279 نغمة على 8 مسارات، بنسبة 50.77%. أنتج تشغيلان كاملان لكل أغنية ملفات متطابقة بايتًا ببايت.


توافق إيقاع MuScriptor
يستخدم المسار الرسمي Beat This final0 ثم ملاءمة المربعات الصغرى ذات التقاطع الحر لنشر BPM ثابت واحد. يفشل الوضع الصارم عندما لا تدعم النبضات سرعة ثابتة، بينما يكتب وضع best-effort قيمة مؤقتة قدرها 120 BPM. كما يصحح كاتب MIDI تأخر البداية ويؤخر جميع النغمات لمحاذاة خط المازورة مع النبضة القوية.
يُبقي TelkNet على Beat This final0 نفسه، ويبقى BPM الثابت المكتشف تلقائيًا هو الوضع الافتراضي الموصى به. عند اختيار تتبّع تغيّر سرعة المصدر، يُستخدم BPM واحد فقط إذا بقيت شبكة الأغنية كاملة ضمن 40 ms من الضربات المكتشفة؛ وإلا تُنشر Tempo Map تكيفية. يبقى BPM اليدوي متاحًا، وعند إيقاف التكميم تبقى أزمنة النغمات الأصلية دون إزاحة لمحاذاة المازورة.
| عنصر المقارنة | MuScriptor الرسمي v0.3.0 | TelkNet v11 |
|---|---|---|
| كشف النبضات | يستخدم Beat This final0. | يستخدم Beat This final0 نفسه ولا يستبدل نموذج الكشف. |
| شبكة الإيقاع المنشورة | ينشر BPM ثابتًا واحدًا بملاءمة ذات تقاطع حر؛ يفشل الوضع الصارم مع السرعة غير الثابتة، ويكتب best-effort قيمة مؤقتة 120 BPM. | يُقبل BPM ثابت فقط عندما لا تتجاوز مسافة الشبكة القصوى 40 ms؛ وإلا تُكتب Tempo Map تكيفية محدودة الطور. |
| التحكم في BPM | لا توفر واجهة CLI الرسمية الحالية BPM يدويًا. | يدعم التكيف والثابت التلقائي وBPM اليدوي من 30 إلى 300. |
| الخط الزمني للنغمات | يصحح تأخر البداية ويؤخر جميع النغمات لمحاذاة المازورة مع النبضة القوية. | عند تعطيل التكميم تبقى أوقات النغمات الأصلية ولا تُطبق إزاحة محاذاة المازورة. |

يبقى Beat This مقدّرًا صوتيًا. قد ينتج ميزان غير مألوف، أو إيقاع ضعيف العابر، أو rubato، أو تغير مفاجئ في السرعة، أو اختيار نبضة بنصف أو ضعف السرعة شبكة غير صحيحة. وقد يختلف BPM التلقائي قليلًا عن قيمة دقيقة معروفة، لذا يتوفر «ثابت · BPM يدوي» عندما تكون قيمة المصدر معروفة. تفعيل تكميم النغمات يحرك أوقاتها عمدًا. لا تصحح إعدادات الإيقاع النغمات المفقودة أو الطبقات الخاطئة أو أخطاء أسماء الآلات والمسارات الناتجة عن MuScriptor. يجب التحقق من ملفات MIDI المهمة مقابل المصدر داخل DAW.