MuScriptor: An Open Model for Multi-Instrument Music Transcription
arXiv - 2026
MuScriptor-large দিয়ে সঙ্গীতকে একাধিক যন্ত্রের MIDI-তে রূপান্তর করুন।
লোড হচ্ছে...
গান বা সম্মিলিত বাদন মাল্টিট্র্যাক MIDI-তে বদলে DAW-তে নোট ও বাদ্যাংশ সম্পাদনা করুন।
ইনপুট
সম্পূর্ণ গান, যন্ত্রসংগীতের সমবেত পরিবেশনা বা একাধিক যন্ত্রের রেকর্ডিং।
সমর্থিত বিন্যাস
আউটপুট
স্কোরিং, অ্যারেঞ্জিং, হারমনি বিশ্লেষণ এবং ডিএডাব্লু ক্লিনআপের জন্য মাল্টি-ট্র্যাক MIDI খসড়া
কেস ব্যবহার করুন
সম্পূর্ণ মিশ্রণ থেকে সম্পাদনাযোগ্য MIDI খসড়া, পাশাপাশি piano / কীবোর্ড, guitar, bass, drums, স্ট্রিংস / বাতাস এবং vocal খসড়ার মতো ক্লিনার একক / সাধারণ-যন্ত্র ইনপুট
আপনার উপাদান ও উদ্দেশ্যের উপযোগী মডেল বেছে নিন এবং জমা দেওয়ার আগে উদাহরণগুলো দেখুন।
খরচ, সময়, ফরম্যাট ও প্যারামিটার নির্বাচিত মডেলের ওপর নির্ভর করে।
মতামতে টুলের নাম, ধাপগুলো এবং সমস্যাটি লিখুন। স্ক্রিনশট দিলে সমস্যা খুঁজতে সুবিধা হয়।
YourMT3+ · YPTF.MoE+Multi noPS: সম্পূর্ণ মিশ্রণ থেকে সম্পাদনাযোগ্য MIDI খসড়া, পাশাপাশি piano / কীবোর্ড, guitar, bass, drums, স্ট্রিংস / বাতাস এবং vocal খসড়ার মতো ক্লিনার একক / সাধারণ-যন্ত্র ইনপুট
ডিফল্ট অংশ মেরামত দীর্ঘ নোট রেখে অংশগুলোর মধ্যে ভুল বাদ্যযন্ত্র কমায়; পুরো মিক্সে এখান থেকে শুরু করুন।
YMT3+: সম্পূর্ণ মিশ্রণ থেকে সম্পাদনাযোগ্য MIDI খসড়া, পাশাপাশি piano / কীবোর্ড, guitar, bass, drums, স্ট্রিংস / বাতাস এবং vocal খসড়ার মতো ক্লিনার একক / সাধারণ-যন্ত্র ইনপুট
YourMT3+ · YPTF.Single noPS: সম্পূর্ণ মিশ্রণ থেকে সম্পাদনাযোগ্য MIDI খসড়া, পাশাপাশি piano / কীবোর্ড, guitar, bass, drums, স্ট্রিংস / বাতাস এবং vocal খসড়ার মতো ক্লিনার একক / সাধারণ-যন্ত্র ইনপুট
YourMT3+ · YPTF.Multi PS: সম্পূর্ণ মিশ্রণ থেকে সম্পাদনাযোগ্য MIDI খসড়া, পাশাপাশি piano / কীবোর্ড, guitar, bass, drums, স্ট্রিংস / বাতাস এবং vocal খসড়ার মতো ক্লিনার একক / সাধারণ-যন্ত্র ইনপুট
YourMT3+ · YPTF.MoE+Multi PS: সম্পূর্ণ মিশ্রণ থেকে সম্পাদনাযোগ্য MIDI খসড়া, পাশাপাশি piano / কীবোর্ড, guitar, bass, drums, স্ট্রিংস / বাতাস এবং vocal খসড়ার মতো ক্লিনার একক / সাধারণ-যন্ত্র ইনপুট
MIROS MusicFM multi-decoder pretrained_msd.pt এবং সূক্ষ্ম টিউনড last.ckpt checkpoint সহ অফিসিয়াল স্থানীয় MIROS রুট চালায়।
BS-RoFormer এসডাব্লু ফিক্সড একটি সম্পূর্ণ মিশ্রণকে six WAV stems বিভক্ত করতে BS-Rofo-SW-Fixed.ckpt প্লাস BS-Rofo-SW-Fixed.yaml ব্যবহার করে।
OaFS 34 শ্রেণির যন্ত্র শনাক্ত করে MIDI ও নোটের সারণি তৈরি করে; বেগ স্থির 127।
নির্দিষ্ট সংখ্যক নামবিহীন স্বররংয়ের ট্র্যাকে নোট ভাগ করে; যন্ত্রের নাম শনাক্ত করে না। যন্ত্রের সংখ্যা জানা ছোট দলের রেকর্ডিংয়ের জন্য উপযোগী। একই স্বরের পরস্পর মিশে থাকা অংশ আলাদা নাও হতে পারে।
কণ্ঠ, ড্রাম, বেস, গিটার, পিয়ানো ও অন্যান্য শব্দ আলাদা করে নোটে রূপান্তর ও MIDI একত্র করে। velocity অনুমান ও যন্ত্র পুনর্নির্ধারণ বেছে নেওয়া যায়; পৃথকীকরণের ভুল নোটে প্রভাব ফেলতে পারে।
ছয়টি স্টেম আলাদা করে MIDI স্বরলিপি তৈরি করে। SheetSage2-Refined বিট, মাত্রা ও গানের অংশ শনাক্ত করে; Tsumugi কর্ড ও কী শনাক্ত করে। আগের পুরো গান প্রতিলিপির পদ্ধতিও বেছে নেওয়া যায়।
arXiv - 2026
MuScriptor-large দিয়ে সঙ্গীতকে একাধিক যন্ত্রের MIDI-তে রূপান্তর করুন।
IEEE MLSP - 2024
YourMT3+ উন্নত ট্রান্সফরমার আর্কিটেকচার, এমওই ভেরিয়েন্ট, মাল্টি-চ্যানেল ডিকোডিং এবং cross-dataset stem augmentation সহ MT3 প্রসারিত করে।
ICLR - 2022
এমটি 3 সিকোয়েন্স মডেলিংয়ের সাথে মাল্টি-টাস্ক মাল্টিট্র্যাক মিউজিক ট্রান্সক্রিপশন প্রতিষ্ঠা করেছে এবং নতুন AMT তুলনাগুলির জন্য নামকরণ বেসলাইন হিসাবে রয়ে গেছে।
arXiv / OpenReview - 2026
2025 AMT চ্যালেঞ্জ সংক্ষিপ্তসার কাগজটি 1 জানুয়ারী থেকে 30 এপ্রিল, 2025 প্রতিযোগিতার জন্য 2026-03-29 এ প্রকাশিত হয়েছিল। এটি 21 টি নিবন্ধিত দল, 14 টি জমা দেওয়া দল, 8 টি বৈধ স্কোর দল এবং একটি 76-টুকরো ক্লাসিকাল টেস্ট সেট প্রতি উদ্ধৃতিতে তিনটি যন্ত্র সহ সেট করে।
Signals - 2026
OaFS 34 শ্রেণির যন্ত্র শনাক্ত করে MIDI ও নোটের সারণি তৈরি করে; বেগ স্থির 127।
এখানে এবং অন্যত্র ব্যবহৃত মডেলগুলোর প্রকাশিত পরীক্ষার ফল অন্তর্ভুক্ত আছে। শুরুতে উৎসের সম্পূর্ণ সারণি দেখানো হয়; তুলনার জন্য শর্ত ও মাপকাঠিও বেছে নেওয়া যায়। ভিন্ন পরীক্ষার শর্তের স্কোর সরাসরি তুলনাযোগ্য নয়।
শুধু যাচাই করা প্রকাশ্য ইনফারেন্স বাস্তবায়ন ও পরীক্ষার সঙ্গে মিলে যাওয়া ওজনের রেকর্ড দেখানো হয়; ওজন লাগে না এমন অ্যালগরিদমও অন্তর্ভুক্ত। বন্ধ সেবা, অপ্রকাশিত ওজন ও অমিল পরীক্ষামূলক সংস্করণ বাদ দেওয়া হয়। এটি সব মডেলের সামগ্রিক তালিকা নয়।
ওজন প্রকাশ করলেই পূর্ণ ওপেন সোর্স লাইসেন্স নিশ্চিত হয় না। ঘোষিত ওজনের লাইসেন্স ও প্রবেশের শর্ত দেখতে তথ্য খুলুন। অঘোষিত লাইসেন্স আলাদাভাবে চিহ্নিত থাকে।
প্রতিটি মডেলের সব মেট্রিক দেখতে ডেটাসেট বেছে নিন। সারিগুলি সরকারি র্যাঙ্ক বা নির্বাচিত মেট্রিক অনুযায়ী সাজানো হয়। প্রতি কলামের সেরা তুলনাযোগ্য মান, সমান মানসহ, গাঢ় করে দেখানো হয়। ভিন্ন মূল্যায়ন পদ্ধতির র্যাঙ্ক আলাদা থাকে; অনুপস্থিত স্কোর - দিয়ে দেখানো হয়।
স্থাপনযোগ্য 9 / উৎসের সারি 17
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
GIU · press_to_win · press_to_win5 · press_to_win3 · press_to_win4 · Bytedance Piano transcription · press_to_win2 · Midnight Questor
অফিসিয়াল লিডারবোর্ডের পুনরুৎপাদনযোগ্য ওপেন সোর্স মডেলগুলোর অফিসিয়াল অবস্থান বজায় রাখা হয়েছে। F1, প্রিসিশন, রিকল, শুরু, শেষ এবং ওভারল্যাপ শতাংশে দেখানো হয়; সময় মিলিসেকেন্ডে। প্রতিযোগিতার জন্য YourMT3+ ফাইলের নামে দেওয়া বাদ্যযন্ত্রের তথ্য ব্যবহার করে। এর স্কোর এই সাইটের সম্পূর্ণ প্রক্রিয়াকরণ ব্যবস্থার পরিমাপ নয়।
| সরকারি র্যাঙ্ক | মডেল | Members | Submission date | Runtime (ms) | F-measure (summary)↑ | Precision↑ | Recall↑ | Average overlap ratio↑ | F-measure (details)↑ | Onset precision↑ | Onset recall↑ | Onset F-measure↑ | Offset precision↑ | Offset recall↑ | Offset F-measure↑ |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 1 | MIROS (Music Information Retrieval Osnabrück)প্রকাশ্য ওজন · ইনফারেন্স কোডMIROS fine-tuned decoderMusicFM encoderইনফারেন্স কোড logs/Multi_longer_seq_length_frozen_enc_silu/le2bzt53/checkpoints/last.ckptমূল্যায়নের সেটিংসওজনের লাইসেন্স ঘোষণা করা হয়নি | Deniz Gün, Fernando Riveros, Paul Koesling, Anish Haluvani Sundresh, William Shelor | 2025-06-02 | 22.0535 | 0.5999 | 0.655839 | 0.5724 | 0.739079 | 0.599875 | 0.877975 | 0.759886 | 0.799196 | 0.807888 | 0.701962 | 0.736779 |
| 2 | YourMT3-YPTF-MoE-Mএই সাইটে ব্যবহৃত মডেল | Sungkyun Chang, Simon Dixon, Emmanouil Benetos | 2025-06-03 | 12.5981 | 0.5939 | 0.600966 | 0.588778 | 0.730518 | 0.593868 | 0.792573 | 0.777088 | 0.783356 | 0.767444 | 0.750847 | 0.757675 |
| 3 | YourMT3-YPTF-S | Sungkyun Chang, Simon Dixon, Emmanouil Benetos | 2025-06-02 | 15.3954 | 0.5582 | 0.556491 | 0.561459 | 0.732617 | 0.55816 | 0.762297 | 0.771807 | 0.76566 | 0.743591 | 0.753287 | 0.747136 |
| 4 | YourMT3-P | Sungkyun Chang, Simon Dixon, Emmanouil Benetos | 2025-06-02 | 14.9916 | 0.3948 | 0.39658 | 0.398548 | 0.72627 | 0.394752 | 0.60259 | 0.613207 | 0.601815 | 0.685018 | 0.691227 | 0.681928 |
| 5 | MT3প্রকাশ্য ওজন · ইনফারেন্স কোড | Google Research Brain Team: Josh Gardner, Ian Simon, Ethan Manilow, Curtis Hawthorne, Jesse Engel | 2025-06-02 | 20.1915 | 0.3932 | 0.38112 | 0.411528 | 0.71797 | 0.393214 | 0.663145 | 0.726103 | 0.687734 | 0.63501 | 0.698339 | 0.659656 |
| 7 | YourMT3-YPTF-SP-Vপ্রকাশ্য ওজন · ইনফারেন্স কোডlogs/2024/ptfs_gmlp_wf_e12_d8_500k/checkpoints/epoch=466-step=500000.ckptইনফারেন্স কোডমূল্যায়নের সেটিংসওজনের লাইসেন্স ঘোষণা করা হয়নি | Sungkyun Chang, Simon Dixon, Emmanouil Benetos | 2025-06-02 | 14.5031 | 0.3306 | 0.32796 | 0.335827 | 0.714713 | 0.330591 | 0.632511 | 0.657221 | 0.641741 | 0.686195 | 0.711273 | 0.695724 |
| 10 | YourMT3-YPTF-MoE-MP | Sungkyun Chang, Simon Dixon, Emmanouil Benetos | 2025-06-02 | 16.0262 | 0.2173 | 0.214966 | 0.220641 | 0.611634 | 0.217338 | 0.696075 | 0.719896 | 0.70555 | 0.699835 | 0.72405 | 0.709509 |
| 15 | ReconVATপ্রকাশ্য ওজন · ইনফারেন্স কোডWeight/String_MusicNet/Unet_R_VAT-XI=1e-06-eps=1.3-String_MusicNet-lr=0.001/weight.ptইনফারেন্স কোডমূল্যায়নের সেটিংসওজনের লাইসেন্স ঘোষণা করা হয়নি | Kin Wai Cheuk, Dorien Herremans, Li Su | 2025-06-02 | 5.4548 | 0.1416 | 0.121534 | 0.180252 | 0.789788 | 0.141598 | 0.307451 | 0.450635 | 0.35515 | 0.478656 | 0.742044 | 0.564281 |
| 16 | Basic Pitchপ্রকাশ্য ওজন · ইনফারেন্স কোড | Spotify's Audio Intelligence Lab: Rachel M. Bittner, Juan José Bosch, David Rubinstein, Gabriel Meseguer-Brocal, Sebastian Ewert | 2025-06-02 | 3.9056 | 0.0634 | 0.054995 | 0.078152 | 0.597734 | 0.063433 | 0.264086 | 0.337363 | 0.290772 | 0.444662 | 0.587456 | 0.495507 |
চিহ্নগুলি এখানে ব্যবহৃত মডেল বা উপাদান বোঝায়। স্কোর ও সেটিংস উদ্ধৃত পরীক্ষার; এগুলি সাইটের সম্পূর্ণ প্রক্রিয়ার নতুন মূল্যায়ন নয়।
ডেটাসেট, সংস্করণ ও শর্ত আলাদা থাকে; যোগ্য সারি না থাকা উৎসও রাখা হয়।
স্থাপনযোগ্য 3 / উৎসের সারি 7
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
𝒟 Synth · MuScriptor trained on · 1 · 𝒟 Synth · MuScriptor trained on · 2 · 𝒟 Synth + 𝒟 Real · MuScriptor trained on · 1 · 𝒟 Synth + 𝒟 Real · MuScriptor trained on · 2
স্থাপনযোগ্য 16 / উৎসের সারি 16
স্থাপনযোগ্য 0 / উৎসের সারি 4
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
MuScriptor (60M) · MuScriptor (100M) · MuScriptor (300M) · MuScriptor (1.3B)
স্থাপনযোগ্য 9 / উৎসের সারি 17
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
GIU · press_to_win · press_to_win5 · press_to_win3 · press_to_win4 · Bytedance Piano transcription · press_to_win2 · Midnight Questor
স্থাপনযোগ্য 9 / উৎসের সারি 14
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
press_to_win 1 · press_to_win 2 · press_to_win 3 · Bytedance Piano · press_to_win 4
স্থাপনযোগ্য 9 / উৎসের সারি 9
স্থাপনযোগ্য 1 / উৎসের সারি 5
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
MT3 (our colab) · MT3 (colab ) · MT3 · PerceiverTF
স্থাপনযোগ্য 1 / উৎসের সারি 7
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
YMT3 · noPS · YMT3+ · noPS | PS · YPTF+S · noPS | PS · YPTF+M · noPS | PS · MT3 [ 1 ] · (colab) · AMT · Baseline *
স্থাপনযোগ্য 1 / উৎসের সারি 12
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
YMT3 base · + Intra-aug. · + Full-vocab. · + Data balancing · + Cross-aug. · + PTF-encoder · + FFN → MoE · + Multi decoder · MT3 (colab) · MT3 [ 1 ] · PerceiverTF [ 25 ]
স্থাপনযোগ্য 10 / উৎসের সারি 25
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
OaFS-ResUnet · Frame F1 (%) · OaFS-CFP · Frame F1 (%) · OaFS-single · Frame F1 (%) · OaFS-ResUnet · Onset F1 (%) · OaFS-CFP · Onset F1 (%) · OaFS-single · Onset F1 (%) · OaFS-ResUnet · Multi-Instrument Frame F1 (%) · OaFS-CFP · Multi-Instrument Frame F1 (%) · OaFS-single · Multi-Instrument Frame F1 (%) · OaFS-ResUnet · Multi-Instrument Onset F1 (%) · OaFS-CFP · Multi-Instrument Onset F1 (%) · OaFS-single · Multi-Instrument Onset F1 (%) · OaFS-ResUnet · Instrument Detection F1 (%) · OaFS-CFP · Instrument Detection F1 (%) · OaFS-single · Instrument Detection F1 (%)
স্থাপনযোগ্য 68 / উৎসের সারি 102
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
OaFS-Single · Acoustic Piano · OaFS-Single · Electric Piano · OaFS-Single · Chromatic Percussion · OaFS-Single · Organ · OaFS-Single · Acoustic Guitar · OaFS-Single · Clean Electric Guitar · OaFS-Single · Distorted Electric Guitar · OaFS-Single · Acoustic Bass · OaFS-Single · Electric Bass · OaFS-Single · Violin · OaFS-Single · Viola · OaFS-Single · Cello · OaFS-Single · Contrabass · OaFS-Single · Orchestral Harp · OaFS-Single · Timpani · OaFS-Single · String Ensemble · OaFS-Single · Synth Strings · OaFS-Single · Choir and Voice · OaFS-Single · Trumpet · OaFS-Single · Trombone · OaFS-Single · Tuba · OaFS-Single · French Horn · OaFS-Single · Brass Section · OaFS-Single · Soprano/Alto Sax · OaFS-Single · Tenor Sax · OaFS-Single · Baritone Sax · OaFS-Single · Oboe · OaFS-Single · English Horn · OaFS-Single · Bassoon · OaFS-Single · Clarinet · OaFS-Single · Pipe · OaFS-Single · Synth Lead · OaFS-Single · Synth Pad · OaFS-Single · Drums
স্থাপনযোগ্য 28 / উৎসের সারি 28
স্থাপনযোগ্য 2 / উৎসের সারি 5
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
OaFS-ResUnet · OaFS-CFP · OaFS-single
স্থাপনযোগ্য 3 / উৎসের সারি 7
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
D16 · MSE · Syn · Rescale
স্কোর নির্দিষ্ট ডেটাসেট, মেট্রিক ও মডেল সংস্করণের জন্য প্রযোজ্য; ভিন্ন পরীক্ষার ফল সরাসরি তুলনাযোগ্য নয়।
টেবিলে শুধু সেই মডেলগুলো আছে যাদের প্রকাশ্য ওজন বা কনফিগারেশন রয়েছে এবং স্থানীয়ভাবে চালানো যায়।
প্রতিটি মডেলের সব মেট্রিক দেখতে ডেটাসেট বেছে নিন। সারিগুলি সরকারি র্যাঙ্ক বা নির্বাচিত মেট্রিক অনুযায়ী সাজানো হয়। প্রতি কলামের সেরা তুলনাযোগ্য মান, সমান মানসহ, গাঢ় করে দেখানো হয়। ভিন্ন মূল্যায়ন পদ্ধতির র্যাঙ্ক আলাদা থাকে; অনুপস্থিত স্কোর - দিয়ে দেখানো হয়।
স্থাপনযোগ্য 3 / উৎসের সারি 7
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
𝒟 Synth · MuScriptor trained on · 1 · 𝒟 Synth · MuScriptor trained on · 2 · 𝒟 Synth + 𝒟 Real · MuScriptor trained on · 1 · 𝒟 Synth + 𝒟 Real · MuScriptor trained on · 2
একই ব্যক্তিগত D_Test-এ গবেষণাপত্রটি CFG=1 চূড়ান্ত মডেলকে YourMT3+-এর সঙ্গে তুলনা করেছে। ফল স্বাধীনভাবে পুনরুৎপাদিত নয় এবং MIROS বা অন্য মূল্যায়ন প্রোটোকলের সঙ্গে সরাসরি তুলনীয় নয়।
| মেট্রিক র্যাঙ্ক | মডেল | পরীক্ষার শর্ত | F1 Score ( ↑ ) | ||||
|---|---|---|---|---|---|---|---|
| Onset | Frame | Offset | Drums | Multi | |||
| 1 | MuScriptor (1.3B) · 𝒟 Synth + 𝒟 Real + 𝒟 RLপ্রকাশ্য ওজন · ইনফারেন্স কোডmodel.safetensorsইনফারেন্স কোডওজনের লাইসেন্স (রিপোজিটরির ঘোষণা): cc-by-nc-4.0শর্ত মেনে নেওয়া বা প্রবেশের আবেদন প্রয়োজন | D_Test · CFG = 1 | 60.4 | 73.3 | 49.0 | 50.2 | 48.2 |
| 2 | YourMT3+ (YPTF.MoE+Multi (noPS)) | D_Test · CFG = 1 | 32.52 | 45.54 | 17.79 | 41.4 | 21.9 |
টেবিলে শুধু সেই মডেলগুলো আছে যাদের প্রকাশ্য ওজন বা কনফিগারেশন রয়েছে এবং স্থানীয়ভাবে চালানো যায়।
প্রতিটি মডেলের সব মেট্রিক দেখতে ডেটাসেট বেছে নিন। সারিগুলি সরকারি র্যাঙ্ক বা নির্বাচিত মেট্রিক অনুযায়ী সাজানো হয়। প্রতি কলামের সেরা তুলনাযোগ্য মান, সমান মানসহ, গাঢ় করে দেখানো হয়। ভিন্ন মূল্যায়ন পদ্ধতির র্যাঙ্ক আলাদা থাকে; অনুপস্থিত স্কোর - দিয়ে দেখানো হয়।
স্থাপনযোগ্য 16 / উৎসের সারি 16
পেপারের টেবিল ২ উভয়ের প্রশিক্ষণ সেটের বাইরে থাকা আটটি ডেটাসেটে প্রকাশিত ও লোকালি ডিপ্লয়যোগ্য দুই মডেল মূল্যায়ন করে।
| মেট্রিক র্যাঙ্ক | মডেল | পরীক্ষার শর্ত | F1 Score ( ↑ ) | ||||
|---|---|---|---|---|---|---|---|
| Onset | Frame | Offset | Drums | Multi | |||
| 1 | MuScriptorপ্রকাশ্য ওজন · ইনফারেন্স কোডmodel.safetensorsইনফারেন্স কোডওজনের লাইসেন্স (রিপোজিটরির ঘোষণা): cc-by-nc-4.0শর্ত মেনে নেওয়া বা প্রবেশের আবেদন প্রয়োজন | Bach10 | 43.1 | 85.0 | 36.0 | - | 34.7 |
| 2 | YourMT3+ | Bach10 | 59.8 | 66.0 | 48.0 | - | 26.4 |
টেবিলে শুধু সেই মডেলগুলো আছে যাদের প্রকাশ্য ওজন বা কনফিগারেশন রয়েছে এবং স্থানীয়ভাবে চালানো যায়।
প্রতিটি মডেলের সব মেট্রিক দেখতে ডেটাসেট বেছে নিন। সারিগুলি সরকারি র্যাঙ্ক বা নির্বাচিত মেট্রিক অনুযায়ী সাজানো হয়। প্রতি কলামের সেরা তুলনাযোগ্য মান, সমান মানসহ, গাঢ় করে দেখানো হয়। ভিন্ন মূল্যায়ন পদ্ধতির র্যাঙ্ক আলাদা থাকে; অনুপস্থিত স্কোর - দিয়ে দেখানো হয়।
স্থাপনযোগ্য 9 / উৎসের সারি 17
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
GIU · press_to_win · press_to_win5 · press_to_win3 · press_to_win4 · Bytedance Piano transcription · press_to_win2 · Midnight Questor
অফিসিয়াল লিডারবোর্ডের পুনরুৎপাদনযোগ্য ওপেন সোর্স মডেলগুলোর অফিসিয়াল অবস্থান বজায় রাখা হয়েছে। F1, প্রিসিশন, রিকল, শুরু, শেষ এবং ওভারল্যাপ শতাংশে দেখানো হয়; সময় মিলিসেকেন্ডে। প্রতিযোগিতার জন্য YourMT3+ ফাইলের নামে দেওয়া বাদ্যযন্ত্রের তথ্য ব্যবহার করে। এর স্কোর এই সাইটের সম্পূর্ণ প্রক্রিয়াকরণ ব্যবস্থার পরিমাপ নয়।
| সরকারি র্যাঙ্ক | মডেল | Members | Submission date | Runtime (ms) | F-measure (summary)↑ | Precision↑ | Recall↑ | Average overlap ratio↑ | F-measure (details)↑ | Onset precision↑ | Onset recall↑ | Onset F-measure↑ | Offset precision↑ | Offset recall↑ | Offset F-measure↑ |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 1 | MIROS (Music Information Retrieval Osnabrück)প্রকাশ্য ওজন · ইনফারেন্স কোডMIROS fine-tuned decoderMusicFM encoderইনফারেন্স কোড logs/Multi_longer_seq_length_frozen_enc_silu/le2bzt53/checkpoints/last.ckptমূল্যায়নের সেটিংসওজনের লাইসেন্স ঘোষণা করা হয়নি | Deniz Gün, Fernando Riveros, Paul Koesling, Anish Haluvani Sundresh, William Shelor | 2025-06-02 | 22.0535 | 0.5999 | 0.655839 | 0.5724 | 0.739079 | 0.599875 | 0.877975 | 0.759886 | 0.799196 | 0.807888 | 0.701962 | 0.736779 |
| 2 | YourMT3-YPTF-MoE-M | Sungkyun Chang, Simon Dixon, Emmanouil Benetos | 2025-06-03 | 12.5981 | 0.5939 | 0.600966 | 0.588778 | 0.730518 | 0.593868 | 0.792573 | 0.777088 | 0.783356 | 0.767444 | 0.750847 | 0.757675 |
| 3 | YourMT3-YPTF-S | Sungkyun Chang, Simon Dixon, Emmanouil Benetos | 2025-06-02 | 15.3954 | 0.5582 | 0.556491 | 0.561459 | 0.732617 | 0.55816 | 0.762297 | 0.771807 | 0.76566 | 0.743591 | 0.753287 | 0.747136 |
| 4 | YourMT3-P | Sungkyun Chang, Simon Dixon, Emmanouil Benetos | 2025-06-02 | 14.9916 | 0.3948 | 0.39658 | 0.398548 | 0.72627 | 0.394752 | 0.60259 | 0.613207 | 0.601815 | 0.685018 | 0.691227 | 0.681928 |
| 5 | MT3প্রকাশ্য ওজন · ইনফারেন্স কোড | Google Research Brain Team: Josh Gardner, Ian Simon, Ethan Manilow, Curtis Hawthorne, Jesse Engel | 2025-06-02 | 20.1915 | 0.3932 | 0.38112 | 0.411528 | 0.71797 | 0.393214 | 0.663145 | 0.726103 | 0.687734 | 0.63501 | 0.698339 | 0.659656 |
| 7 | YourMT3-YPTF-SP-Vপ্রকাশ্য ওজন · ইনফারেন্স কোডlogs/2024/ptfs_gmlp_wf_e12_d8_500k/checkpoints/epoch=466-step=500000.ckptইনফারেন্স কোডমূল্যায়নের সেটিংসওজনের লাইসেন্স ঘোষণা করা হয়নি | Sungkyun Chang, Simon Dixon, Emmanouil Benetos | 2025-06-02 | 14.5031 | 0.3306 | 0.32796 | 0.335827 | 0.714713 | 0.330591 | 0.632511 | 0.657221 | 0.641741 | 0.686195 | 0.711273 | 0.695724 |
| 10 | YourMT3-YPTF-MoE-MP | Sungkyun Chang, Simon Dixon, Emmanouil Benetos | 2025-06-02 | 16.0262 | 0.2173 | 0.214966 | 0.220641 | 0.611634 | 0.217338 | 0.696075 | 0.719896 | 0.70555 | 0.699835 | 0.72405 | 0.709509 |
| 15 | ReconVATপ্রকাশ্য ওজন · ইনফারেন্স কোডWeight/String_MusicNet/Unet_R_VAT-XI=1e-06-eps=1.3-String_MusicNet-lr=0.001/weight.ptইনফারেন্স কোডমূল্যায়নের সেটিংসওজনের লাইসেন্স ঘোষণা করা হয়নি | Kin Wai Cheuk, Dorien Herremans, Li Su | 2025-06-02 | 5.4548 | 0.1416 | 0.121534 | 0.180252 | 0.789788 | 0.141598 | 0.307451 | 0.450635 | 0.35515 | 0.478656 | 0.742044 | 0.564281 |
| 16 | Basic Pitchপ্রকাশ্য ওজন · ইনফারেন্স কোড | Spotify's Audio Intelligence Lab: Rachel M. Bittner, Juan José Bosch, David Rubinstein, Gabriel Meseguer-Brocal, Sebastian Ewert | 2025-06-02 | 3.9056 | 0.0634 | 0.054995 | 0.078152 | 0.597734 | 0.063433 | 0.264086 | 0.337363 | 0.290772 | 0.444662 | 0.587456 | 0.495507 |
টেবিলে শুধু সেই মডেলগুলো আছে যাদের প্রকাশ্য ওজন বা কনফিগারেশন রয়েছে এবং স্থানীয়ভাবে চালানো যায়।
প্রতিটি মডেলের সব মেট্রিক দেখতে ডেটাসেট বেছে নিন। সারিগুলি সরকারি র্যাঙ্ক বা নির্বাচিত মেট্রিক অনুযায়ী সাজানো হয়। প্রতি কলামের সেরা তুলনাযোগ্য মান, সমান মানসহ, গাঢ় করে দেখানো হয়। ভিন্ন মূল্যায়ন পদ্ধতির র্যাঙ্ক আলাদা থাকে; অনুপস্থিত স্কোর - দিয়ে দেখানো হয়।
স্থাপনযোগ্য 9 / উৎসের সারি 14
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
press_to_win 1 · press_to_win 2 · press_to_win 3 · Bytedance Piano · press_to_win 4
ওয়েবসাইট ও গবেষণাপত্র আলাদা স্ন্যাপশট; শেষ অঙ্কে সামান্য পার্থক্য আছে। পরীক্ষায় 76টি সীমাবদ্ধ কৃত্রিম অংশ, প্রতিটিতে সর্বোচ্চ তিন যন্ত্র। প্রতিটি উৎসের মান রাখা হয়েছে। প্রতিযোগিতার জন্য YourMT3+ ফাইলের নামে দেওয়া বাদ্যযন্ত্রের তথ্য ব্যবহার করে। এর স্কোর এই সাইটের সম্পূর্ণ প্রক্রিয়াকরণ ব্যবস্থার পরিমাপ নয়।
| সরকারি র্যাঙ্ক | মডেল | F1 Score↑ | Precision↑ | Recall↑ | Overlap↑ | Runtime |
|---|---|---|---|---|---|---|
| 1 | MIROSপ্রকাশ্য ওজন · ইনফারেন্স কোডMIROS fine-tuned decoderMusicFM encoderইনফারেন্স কোড logs/Multi_longer_seq_length_frozen_enc_silu/le2bzt53/checkpoints/last.ckptমূল্যায়নের সেটিংসওজনের লাইসেন্স ঘোষণা করা হয়নি | 0.5998 | 0.6558 | 0.5724 | 0.7391 | 22.05 |
| 2 | YourMT3-YPTF-MoE-M | 0.5938 | 0.6010 | 0.5888 | 0.7305 | 12.60 |
| 3 | YourMT3-YPTF-S | 0.5581 | 0.5565 | 0.5615 | 0.7326 | 15.40 |
| 4 | YourMT3-P | 0.3947 | 0.3966 | 0.3985 | 0.7263 | 14.99 |
| 5 | MT3 (baseline)প্রকাশ্য ওজন · ইনফারেন্স কোড | 0.3932 | 0.3811 | 0.4115 | 0.7180 | 20.19 |
| 6 | YourMT3-YPTF-SP-Vপ্রকাশ্য ওজন · ইনফারেন্স কোডlogs/2024/ptfs_gmlp_wf_e12_d8_500k/checkpoints/epoch=466-step=500000.ckptইনফারেন্স কোডমূল্যায়নের সেটিংসওজনের লাইসেন্স ঘোষণা করা হয়নি | 0.3305 | 0.3280 | 0.3358 | 0.7147 | 14.50 |
| 9 | YourMT3-YPTF-MoE-MP | 0.2173 | 0.2150 | 0.2206 | 0.6116 | 16.03 |
| 13 | ReconVATপ্রকাশ্য ওজন · ইনফারেন্স কোডWeight/String_MusicNet/Unet_R_VAT-XI=1e-06-eps=1.3-String_MusicNet-lr=0.001/weight.ptইনফারেন্স কোডমূল্যায়নের সেটিংসওজনের লাইসেন্স ঘোষণা করা হয়নি | 0.1415 | 0.1215 | 0.1803 | 0.7898 | 5.45 |
| 14 | Basic Pitchপ্রকাশ্য ওজন · ইনফারেন্স কোড | 0.0634 | 0.0550 | 0.0782 | 0.5977 | 3.91 |
টেবিলে শুধু সেই মডেলগুলো আছে যাদের প্রকাশ্য ওজন বা কনফিগারেশন রয়েছে এবং স্থানীয়ভাবে চালানো যায়।
প্রতিটি মডেলের সব মেট্রিক দেখতে ডেটাসেট বেছে নিন। সারিগুলি সরকারি র্যাঙ্ক বা নির্বাচিত মেট্রিক অনুযায়ী সাজানো হয়। প্রতি কলামের সেরা তুলনাযোগ্য মান, সমান মানসহ, গাঢ় করে দেখানো হয়। ভিন্ন মূল্যায়ন পদ্ধতির র্যাঙ্ক আলাদা থাকে; অনুপস্থিত স্কোর - দিয়ে দেখানো হয়।
স্থাপনযোগ্য 9 / উৎসের সারি 9
Table 2 নির্দিষ্ট যন্ত্রসংখ্যা অনুযায়ী গড় ± মানক বিচ্যুতি দেখায়। প্রতিটি গোষ্ঠীর র্যাঙ্কিং আলাদা, সামগ্রিক সারণির বিকল্প নয়। প্রতিযোগিতার জন্য YourMT3+ ফাইলের নামে দেওয়া বাদ্যযন্ত্রের তথ্য ব্যবহার করে। এর স্কোর এই সাইটের সম্পূর্ণ প্রক্রিয়াকরণ ব্যবস্থার পরিমাপ নয়।
| মেট্রিক র্যাঙ্ক | মডেল | পরীক্ষার শর্ত | F-measure↑ | Precision↑ | Recall↑ |
|---|---|---|---|---|---|
| 1 | YourMT3-YPTF-MoE-M | Count = 1 (n=6) | 0.7594 ± 0.2304 | 0.7858 ± 0.2411 | 0.7367 ± 0.2254 |
| 2 | MIROSপ্রকাশ্য ওজন · ইনফারেন্স কোডMIROS fine-tuned decoderMusicFM encoderইনফারেন্স কোড logs/Multi_longer_seq_length_frozen_enc_silu/le2bzt53/checkpoints/last.ckptমূল্যায়নের সেটিংসওজনের লাইসেন্স ঘোষণা করা হয়নি | Count = 1 (n=6) | 0.7193 ± 0.2103 | 0.9067 ± 0.2286 | 0.6233 ± 0.2295 |
| 3 | MT3 (Baseline)প্রকাশ্য ওজন · ইনফারেন্স কোড | Count = 1 (n=6) | 0.5483 ± 0.3898 | 0.5548 ± 0.3974 | 0.5422 ± 0.3829 |
প্রতিটি মডেলের সব মেট্রিক দেখতে ডেটাসেট বেছে নিন। সারিগুলি সরকারি র্যাঙ্ক বা নির্বাচিত মেট্রিক অনুযায়ী সাজানো হয়। প্রতি কলামের সেরা তুলনাযোগ্য মান, সমান মানসহ, গাঢ় করে দেখানো হয়। ভিন্ন মূল্যায়ন পদ্ধতির র্যাঙ্ক আলাদা থাকে; অনুপস্থিত স্কোর - দিয়ে দেখানো হয়।
স্থাপনযোগ্য 1 / উৎসের সারি 5
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
MT3 (our colab) · MT3 (colab ) · MT3 · PerceiverTF
স্লাক-স্টাইল মেট্রিক্সের উপর MT3-ফ্যামিলি বেসলাইনের সাথে YourMT3+ কাগজের তুলনা।
| মেট্রিক র্যাঙ্ক | মডেল | Bass↑ | Brass↑ | C.Perc↑ | Guitar↑ | Organ↑ | Piano↑ | Pipe↑ | Reed↑ | Strings and Ens.↑ | Synth Lead↑ | Synth Pad↑ | Drums↑ | Onset F1 (non-drum)↑ | Offset F1 (non-drum)↑ | Onset F1 (drums/gm)↑ | Multi (Onset-Offset) F1 ♠↑ | Multi Onset F1↑ |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| - | YPTF.MoE+M (PS) | 93.20 | 74.96 | 67.70 | 82.27 | 73.48 | 88.84 | 74.72 | 82.22 | 75.44 | 84.19 | 45.57 | 90.05 | 84.56 | 70.70 | 90.05 | 74.84 | - |
প্রতিটি মডেলের সব মেট্রিক দেখতে ডেটাসেট বেছে নিন। সারিগুলি সরকারি র্যাঙ্ক বা নির্বাচিত মেট্রিক অনুযায়ী সাজানো হয়। প্রতি কলামের সেরা তুলনাযোগ্য মান, সমান মানসহ, গাঢ় করে দেখানো হয়। ভিন্ন মূল্যায়ন পদ্ধতির র্যাঙ্ক আলাদা থাকে; অনুপস্থিত স্কোর - দিয়ে দেখানো হয়।
স্থাপনযোগ্য 1 / উৎসের সারি 7
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
YMT3 · noPS · YMT3+ · noPS | PS · YPTF+S · noPS | PS · YPTF+M · noPS | PS · MT3 [ 1 ] · (colab) · AMT · Baseline *
| মেট্রিক র্যাঙ্ক | মডেল | পরীক্ষার শর্ত | MAPS [ 21 ] (unseen) · Piano | MAPS [ 21 ] (seen) | Maestro v3 | MusicNet ext. (EM) [ 10 ] | MusicNet ext. [ 9 , 10 ] | MIR-ST500 [ 13 ] (SVS) · Singing | MIR-ST500 [ 13 ] | MIR-ST500 (100ms [ 20 ] ) | ENSTdrums (DTP [ 15 ] ) · Drums | ENSTdrums (DTM [ 15 ] ) | GuitarSet [ 11 ] (MT3 [ 1 ] ) · Guitar | URMP [ 22 ] Onset F1 [ 1 ] · Agnostic | URMP [ 22 ] Multi F1 [ 1 ] · Ensemble | Slakh [ 18 ] Onset F1 [ 1 ] · Agnostic | Slakh [ 18 ] Multi F1 [ 1 ] · All | ||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Strings↑ | Winds↑ | Strings↑ | Winds↑ | ||||||||||||||||
| - | YPTF.MoE+M | noPS | PS | 87.88 | 86.25 | - | 96.98 | 96.52 | 91.32 | 90.07 | 83.46 | 78.50 | 66.14 | 66.09 | 55.95 | 55.33 | 71.60 | 72.05 | 70.59 | 71.07 | 81.14 | 82.08 | 88.79 | 89.48 | 85.92 | 87.27 | 91.65 | 88.87 | 81.05 | 81.79 | 67.22 | 67.98 | 84.14 | 84.56 | 73.98 | 74.84 |
প্রতিটি মডেলের সব মেট্রিক দেখতে ডেটাসেট বেছে নিন। সারিগুলি সরকারি র্যাঙ্ক বা নির্বাচিত মেট্রিক অনুযায়ী সাজানো হয়। প্রতি কলামের সেরা তুলনাযোগ্য মান, সমান মানসহ, গাঢ় করে দেখানো হয়। ভিন্ন মূল্যায়ন পদ্ধতির র্যাঙ্ক আলাদা থাকে; অনুপস্থিত স্কোর - দিয়ে দেখানো হয়।
স্থাপনযোগ্য 1 / উৎসের সারি 12
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
YMT3 base · + Intra-aug. · + Full-vocab. · + Data balancing · + Cross-aug. · + PTF-encoder · + FFN → MoE · + Multi decoder · MT3 (colab) · MT3 [ 1 ] · PerceiverTF [ 25 ]
| মেট্রিক র্যাঙ্ক | মডেল | Onset F1↑ | Offset F1↑ | Drum F1↑ |
|---|---|---|---|---|
| - | YPTF.MoE+Multi | 84.6 | 70.7 | 90.1 |
প্রতিটি মডেলের সব মেট্রিক দেখতে ডেটাসেট বেছে নিন। সারিগুলি সরকারি র্যাঙ্ক বা নির্বাচিত মেট্রিক অনুযায়ী সাজানো হয়। প্রতি কলামের সেরা তুলনাযোগ্য মান, সমান মানসহ, গাঢ় করে দেখানো হয়। ভিন্ন মূল্যায়ন পদ্ধতির র্যাঙ্ক আলাদা থাকে; অনুপস্থিত স্কোর - দিয়ে দেখানো হয়।
স্থাপনযোগ্য 10 / উৎসের সারি 25
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
OaFS-ResUnet · Frame F1 (%) · OaFS-CFP · Frame F1 (%) · OaFS-single · Frame F1 (%) · OaFS-ResUnet · Onset F1 (%) · OaFS-CFP · Onset F1 (%) · OaFS-single · Onset F1 (%) · OaFS-ResUnet · Multi-Instrument Frame F1 (%) · OaFS-CFP · Multi-Instrument Frame F1 (%) · OaFS-single · Multi-Instrument Frame F1 (%) · OaFS-ResUnet · Multi-Instrument Onset F1 (%) · OaFS-CFP · Multi-Instrument Onset F1 (%) · OaFS-single · Multi-Instrument Onset F1 (%) · OaFS-ResUnet · Instrument Detection F1 (%) · OaFS-CFP · Instrument Detection F1 (%) · OaFS-single · Instrument Detection F1 (%)
আনুষ্ঠানিক সারণি 5 পাঁচটি ডেটাসেট আলাদাভাবে তুলনা করে এবং কেবল সংশ্লিষ্ট প্রকাশ্য ওজন যাচাই করা পরীক্ষা দেখায়। বর্তমান OaFS যৌথভাবে প্রশিক্ষিত; ফলাফল MuScriptor-এর চেয়ে ভালো হওয়া প্রমাণ করে না।
| মেট্রিক র্যাঙ্ক | মডেল | পরীক্ষার শর্ত | Frame F1 (%)↑ | Onset F1 (%)↑ | Multi-Instrument Frame F1 (%)↑ | Multi-Instrument Onset F1 (%)↑ | Instrument Detection F1 (%)↑ |
|---|---|---|---|---|---|---|---|
| 1 | MT3প্রকাশ্য ওজন · ইনফারেন্স কোডOfficial MT3 T5X checkpoint and 294 tensor filesইনফারেন্স কোডমূল্যায়নের সেটিংসওজনের লাইসেন্স ঘোষণা করা হয়নি | MAESTRO | 55.30 | 95.16 | 55.30 | 95.16 | 99.72 |
| 2 | OaFSপ্রকাশ্য ওজন · ইনফারেন্স কোড | MAESTRO | 76.10 | 94.17 | 76.10 | 94.17 | 100 |
প্রতিটি মডেলের সব মেট্রিক দেখতে ডেটাসেট বেছে নিন। সারিগুলি সরকারি র্যাঙ্ক বা নির্বাচিত মেট্রিক অনুযায়ী সাজানো হয়। প্রতি কলামের সেরা তুলনাযোগ্য মান, সমান মানসহ, গাঢ় করে দেখানো হয়। ভিন্ন মূল্যায়ন পদ্ধতির র্যাঙ্ক আলাদা থাকে; অনুপস্থিত স্কোর - দিয়ে দেখানো হয়।
স্থাপনযোগ্য 68 / উৎসের সারি 102
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
OaFS-Single · Acoustic Piano · OaFS-Single · Electric Piano · OaFS-Single · Chromatic Percussion · OaFS-Single · Organ · OaFS-Single · Acoustic Guitar · OaFS-Single · Clean Electric Guitar · OaFS-Single · Distorted Electric Guitar · OaFS-Single · Acoustic Bass · OaFS-Single · Electric Bass · OaFS-Single · Violin · OaFS-Single · Viola · OaFS-Single · Cello · OaFS-Single · Contrabass · OaFS-Single · Orchestral Harp · OaFS-Single · Timpani · OaFS-Single · String Ensemble · OaFS-Single · Synth Strings · OaFS-Single · Choir and Voice · OaFS-Single · Trumpet · OaFS-Single · Trombone · OaFS-Single · Tuba · OaFS-Single · French Horn · OaFS-Single · Brass Section · OaFS-Single · Soprano/Alto Sax · OaFS-Single · Tenor Sax · OaFS-Single · Baritone Sax · OaFS-Single · Oboe · OaFS-Single · English Horn · OaFS-Single · Bassoon · OaFS-Single · Clarinet · OaFS-Single · Pipe · OaFS-Single · Synth Lead · OaFS-Single · Synth Pad · OaFS-Single · Drums
| মেট্রিক র্যাঙ্ক | মডেল | পরীক্ষার শর্ত | Total Number of Notes | Frame F1 (%)↑ | Onset F1 (%)↑ |
|---|---|---|---|---|---|
| 1 | OaFSপ্রকাশ্য ওজন · ইনফারেন্স কোড | Acoustic Piano | 974,080 | 65.90 | 71.37 |
| 2 | MT3প্রকাশ্য ওজন · ইনফারেন্স কোডOfficial MT3 T5X checkpoint and 294 tensor filesইনফারেন্স কোডমূল্যায়নের সেটিংসওজনের লাইসেন্স ঘোষণা করা হয়নি | Acoustic Piano | 974,080 | 56.90 | 66.08 |
প্রতিটি মডেলের সব মেট্রিক দেখতে ডেটাসেট বেছে নিন। সারিগুলি সরকারি র্যাঙ্ক বা নির্বাচিত মেট্রিক অনুযায়ী সাজানো হয়। প্রতি কলামের সেরা তুলনাযোগ্য মান, সমান মানসহ, গাঢ় করে দেখানো হয়। ভিন্ন মূল্যায়ন পদ্ধতির র্যাঙ্ক আলাদা থাকে; অনুপস্থিত স্কোর - দিয়ে দেখানো হয়।
স্থাপনযোগ্য 28 / উৎসের সারি 28
| মেট্রিক র্যাঙ্ক | মডেল | পরীক্ষার শর্ত | Frame F1 (%)↑ | Onset F1 (%)↑ |
|---|---|---|---|---|
| 1 | OaFSপ্রকাশ্য ওজন · ইনফারেন্স কোড | Piano | 70.36 | 72.10 |
| 2 | MT3প্রকাশ্য ওজন · ইনফারেন্স কোডOfficial MT3 T5X checkpoint and 294 tensor filesইনফারেন্স কোডমূল্যায়নের সেটিংসওজনের লাইসেন্স ঘোষণা করা হয়নি | Piano | 63.12 | 69.99 |
প্রতিটি মডেলের সব মেট্রিক দেখতে ডেটাসেট বেছে নিন। সারিগুলি সরকারি র্যাঙ্ক বা নির্বাচিত মেট্রিক অনুযায়ী সাজানো হয়। প্রতি কলামের সেরা তুলনাযোগ্য মান, সমান মানসহ, গাঢ় করে দেখানো হয়। ভিন্ন মূল্যায়ন পদ্ধতির র্যাঙ্ক আলাদা থাকে; অনুপস্থিত স্কোর - দিয়ে দেখানো হয়।
স্থাপনযোগ্য 2 / উৎসের সারি 5
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
OaFS-ResUnet · OaFS-CFP · OaFS-single
| মেট্রিক র্যাঙ্ক | মডেল | Number of Trainable Parameters | Number of Instrument Classes Excluding “Others” |
|---|---|---|---|
| - | MT3প্রকাশ্য ওজন · ইনফারেন্স কোডOfficial MT3 T5X checkpoint and 294 tensor filesইনফারেন্স কোডমূল্যায়নের সেটিংসওজনের লাইসেন্স ঘোষণা করা হয়নি | 93.7 M | 34 |
| - | OaFSপ্রকাশ্য ওজন · ইনফারেন্স কোড | 64.9 M | 34 |
প্রতিটি মডেলের সব মেট্রিক দেখতে ডেটাসেট বেছে নিন। সারিগুলি সরকারি র্যাঙ্ক বা নির্বাচিত মেট্রিক অনুযায়ী সাজানো হয়। প্রতি কলামের সেরা তুলনাযোগ্য মান, সমান মানসহ, গাঢ় করে দেখানো হয়। ভিন্ন মূল্যায়ন পদ্ধতির র্যাঙ্ক আলাদা থাকে; অনুপস্থিত স্কোর - দিয়ে দেখানো হয়।
স্থাপনযোগ্য 3 / উৎসের সারি 7
এই পরীক্ষাগুলোর পূর্ণ প্রকাশ্য ইনফারেন্স প্যাকেজ যাচাই করা হয়নি। একই নামের মডেলের অন্য ওজন বিকল্প নয়।
D16 · MSE · Syn · Rescale
গবেষণার সারণি 3: K হলো নির্দিষ্ট স্বররংয়ের সংখ্যা। ট্র্যাকের সেরা মিল নির্ধারণ করে প্রতি ট্র্যাকের F1 হিসাব করা হয়। ফল অন্তত তিনবার প্রশিক্ষণের গড়, এই সাইটের চেকপয়েন্টের নতুন মাপ নয়।
| মেট্রিক র্যাঙ্ক | মডেল | BACH10 2 mix | BACH10 3 mix | BACH10 4 mix | URMP 2 mix | URMP 3 mix | ||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| F FS↑ | F S↑ | ratio↑ | F FS↑ | F S↑ | ratio↑ | F FS↑ | F S↑ | ratio↑ | F FS↑ | F S↑ | ratio↑ | F FS↑ | F S↑ | ratio↑ | ||
| 1 | Oursপ্রকাশ্য ওজন · ইনফারেন্স কোড | 83.4 | 84.6 | 99.0 | 77.8 | 80.1 | 96.7 | 66.2 | 72.7 | 89.9 | 68.9 | 66.8 | 82.6 | 58.5 | 60.0 | 77.1 |
| 2 | Shareপ্রকাশ্য ওজন · ইনফারেন্স কোডseptimbre/ablation/DicephNet/dicephnet_model.pthইনফারেন্স কোডমূল্যায়নের সেটিংসওজনের লাইসেন্স ঘোষণা করা হয়নি | 82.1 | 83.0 | 98.4 | 76.1 | 78.9 | 96.6 | 68.5 | 72.8 | 91.0 | 69.0 | 68.3 | 84.6 | 57.2 | 57.5 | 74.1 |
| 3 | Tanakaপ্রকাশ্য ওজন · ইনফারেন্স কোড | 77.9 | 79.6 | 93.2 | 66.1 | 69.0 | 83.4 | 55.4 | 59.2 | 73.2 | 65.5 | 64.1 | 79.3 | 56.5 | 56.5 | 72.8 |
আপনার উপাদানের উপযোগী প্রক্রিয়াকরণ পদ্ধতি ও ধাপ খুঁজুন।
TelkNet সংশোধন নোট · ১৩ আগস্ট ২০২৬
একই সম্পূর্ণ গান TelkNet এবং সরকারি MuScriptor Large 0.3.0-এর strict mode-এ চালিয়েছি। দুই output-এই 8টি part ও 6,560টি note আছে; প্রতিটি note-এর part, pitch ও order মিলে যায়। অস্বাভাবিক অংশটি প্রায় 182–222 সেকেন্ডে: source audio-তে মাঝারি থেকে উচ্চ frequency-র স্পষ্ট pitched line আছে, কিন্তু MIDI-তে C4-এর ওপরে প্রায় 40.31 সেকেন্ড ফাঁকা। UI, BPM processing বা MIDI editor ওই note মুছে দেয়নি; ফাঁকটি সরকারি model output-এই ছিল। মূল score না থাকায় ঠিক কতটি note বাদ গেছে, তা বলা যায় না।
TelkNet পাঁচ সেকেন্ডের অংশগুলোর মধ্যে যন্ত্রের তথ্য আদানপ্রদান সামঞ্জস্য করে, যাতে ভুল শনাক্তকরণ পরের অংশে কম ছড়ায় এবং দীর্ঘ নোটগুলো যুক্ত থাকে। MuScriptor Large প্রতিটি অংশ একবার ট্রান্সক্রাইব করে।
এরপর 14টি গান দিয়ে 16টি সম্পূর্ণ run শেষ করেছি; সবগুলো স্বাভাবিকভাবে শেষ হয়েছে। প্রথম গানে C4-এর ওপর দীর্ঘতম onset gap 40.309 সেকেন্ড থেকে 1.970 সেকেন্ডে নেমেছে। দ্বিতীয় গান 1,698টি note, 6টি active track ও 70.79% piano থেকে 2,279টি note, 8টি active track ও 50.77% piano-তে বদলেছে। প্রতিটি গান দুবার সম্পূর্ণ rerun করলে byte-identical file পাওয়া গেছে।


MuScriptor টেম্পো সামঞ্জস্য
সরকারি ভিত্তি Beat This final0 ব্যবহার করে এবং মুক্ত intercept-সহ least-squares fit দিয়ে একটি স্থির BPM প্রকাশ করে। শনাক্ত beat স্থির টেম্পো সমর্থন না করলে strict mode ব্যর্থ হয়; best-effort mode 120 BPM placeholder লেখে। MIDI writer onset delay ঠিক করে এবং downbeat-এর সঙ্গে bar line মেলাতে সব নোট সামনে সরায়।
TelkNet একই Beat This final0 রাখে এবং স্বয়ংক্রিয়ভাবে শনাক্ত একক BPM-ই প্রস্তাবিত ডিফল্ট থাকে। ব্যবহারকারী মূল গানের গতি অনুসরণ মোড বেছে নিলে, পুরো গানের গ্রিড শনাক্ত বিটের 40 ms-এর মধ্যে থাকলেই একক BPM লেখা হয়; সীমা ছাড়ালে অভিযোজিত Tempo Map প্রকাশ করা হয়। হাতে নির্ধারিত BPM-ও উপলভ্য থাকে। কোয়ান্টাইজেশন বন্ধ থাকলে মডেলের মূল নোটের সময় অপরিবর্তিত থাকে।
| তুলনার বিষয় | সরকারি MuScriptor v0.3.0 | TelkNet v11 |
|---|---|---|
| Beat শনাক্তকরণ | Beat This final0 ব্যবহার করে। | একই Beat This final0 ব্যবহার করে; শনাক্তকরণ মডেল বদলায় না। |
| প্রকাশিত tempo grid | মুক্ত intercept fit দিয়ে একটি স্থির BPM প্রকাশ করে; tempo স্থির না হলে strict mode ব্যর্থ হয় এবং best-effort 120 BPM placeholder লেখে। | সর্বোচ্চ গ্রিড দূরত্ব 40 ms-এর মধ্যে হলে তবেই স্থির BPM; নইলে পর্যায়-সীমাবদ্ধ অভিযোজিত টেম্পো মানচিত্র। |
| BPM নিয়ন্ত্রণ | বর্তমান সরকারি CLI-তে manual BPM নেই। | Adaptive, fixed-auto এবং 30–300 manual BPM সমর্থন করে। |
| নোটের সময়রেখা | Onset delay ঠিক করে এবং bar line-কে downbeat-এর সঙ্গে মেলাতে সব নোট পিছিয়ে দেয়। | Quantization বন্ধ থাকলে মডেলের মূল নোটের সময় অক্ষুণ্ণ থাকে; bar-alignment shift প্রয়োগ হয় না। |

Beat This এখনও অডিও থেকে অনুমান করে। অস্বাভাবিক মাত্রা, দুর্বল বা আঘাতহীন ছন্দ, rubato, হঠাৎ টেম্পো বদল, কিংবা ভুল অর্ধেক বা দ্বিগুণ টেম্পো-স্পন্দন থেকে ছক ভুল হতে পারে। স্বয়ংক্রিয় BPM জানা নির্ভুল মান থেকে সামান্য আলাদা হতে পারে, তাই উৎসের BPM জানা থাকলে “স্থির · হাতে BPM” ব্যবহার করা যায়। নোটের কোয়ান্টাইজেশন চালু করলে ইচ্ছাকৃতভাবে নোটের সময় বদলাবে। টেম্পো সেটিংস MuScriptor-এর বাদ পড়া নোট, ভুল স্বর বা যন্ত্র ও ট্র্যাকের নামের ভুল সংশোধন করতে পারে না। গুরুত্বপূর্ণ MIDI এখনও DAW-তে মূল অডিওর সঙ্গে মিলিয়ে দেখা উচিত।