Τι είναι Μεταγραφή πολλαπλών οργάνων MuScriptor;

Μετατρέψτε μια μικτή εγγραφή σε MIDI πολλών οργάνων με το MuScriptor-large; Υποστηρίζει εισόδους σε μορφές όπως mp3 / wav / flac

Σε ποιον απευθύνεται Μεταγραφή πολλαπλών οργάνων MuScriptor;

MIDI / μεταγραφή Μετατρέψτε μια μικτή εγγραφή σε MIDI πολλών οργάνων με το MuScriptor-large; Υποστηρίζει εισόδους σε μορφές όπως mp3 / wav / flac

Μεταγραφή πολλαπλών οργάνων MuScriptor

Q: Σε ποιες εργασίες μπορεί να βοηθήσει Μεταγραφή πολλαπλών οργάνων MuScriptor;

MIDI / μεταγραφή; Μετατρέψτε μια μικτή εγγραφή σε MIDI πολλών οργάνων με το MuScriptor-large; Υποστηρίζει εισόδους σε μορφές όπως mp3 / wav / flac; Ελέγξτε εάν οι υποστηριζόμενες μορφές εισόδου ταιριάζουν με το υλικό σας; Επιβεβαιώστε εάν το αποτέλεσμα ταιριάζει στην τρέχουσα ροή εργασίας σας; Ζυγίστε runtime και τις πιστώσεις για να αποφασίσετε εάν η μαζική επεξεργασία έχει νόημα

Q: Ποιες οντότητες μοντέλου και λέξης-κλειδιού συνδέονται με Μεταγραφή πολλαπλών οργάνων MuScriptor;

MuScriptor-large, MuScriptor source (pinned), MuScriptor-large weights (pinned), MuScriptor paper, MuScriptor Table 1, D_Test / CFG=1, Paper Table 1, YourMT3+

Μοντέλα, παράμετροι και πηγές

Μετατρέψτε μια μικτή εγγραφή σε MIDI πολλών οργάνων με το MuScriptor-large

MuScriptor-largeMuScriptor source (pinned)MuScriptor-large weights (pinned)MuScriptor paperMuScriptor Table 1D_Test / CFG=1Paper Table 1YourMT3+D_Test / YPTF.MoE+Multi (noPS)MuScriptor Table 2Bach10Paper Table 2

Σύγκριση MuScriptor-large που αναφέρουν οι συγγραφείς

MuScriptor Table 1

Στο ίδιο ιδιωτικό D_Test, η εργασία συγκρίνει το τελικό μοντέλο CFG=1 με το YourMT3+. Τα αποτελέσματα δεν έχουν αναπαραχθεί ανεξάρτητα και δεν συγκρίνονται άμεσα με το MIROS ή άλλα πρωτόκολλα.

Συνθήκη αξιολόγησης	Μοντέλο	F1 πολλαπλών οργάνων (%)	Αναλυτικές μετρήσεις
D_Test / CFG=1	MuScriptor-largeTelkNetPaper Table 1	48.20SOTA	F1 έναρξης (%)60.40ΚαλύτεροF1 καρέ (%)73.30ΚαλύτεροF1 λήξης (%)49.00ΚαλύτεροF1 τυμπάνων (%)50.20Καλύτερο
D_Test / YPTF.MoE+Multi (noPS)	YourMT3+Paper Table 1	21.90	F1 έναρξης (%)32.52F1 καρέ (%)45.54F1 λήξης (%)17.79F1 τυμπάνων (%)41.40

MuScriptor έναντι YourMT3+ σε οκτώ δημόσια σύνολα

MuScriptor Table 2

Ο πίνακας 2 της εργασίας αξιολογεί τα δύο δημοσιευμένα μοντέλα τοπικής εγκατάστασης σε οκτώ σύνολα εκτός της εκπαίδευσης και των δύο. Τα SOTA και Καλύτερο υπολογίζονται ανά σύνολο· το MIROS δεν προστίθεται επειδή δεν αναφέρεται με αυτό το πρωτόκολλο.

Συνθήκη αξιολόγησης	Μοντέλο	F1 πολλαπλών οργάνων (%)	Αναλυτικές μετρήσεις
Bach10	YourMT3+Paper Table 2	26.4	F1 έναρξης (%)59.8ΚαλύτεροF1 καρέ (%)66.0F1 λήξης (%)48.0Καλύτερο
Bach10	MuScriptor-largeTelkNetPaper Table 2	34.7SOTA	F1 έναρξης (%)43.1F1 καρέ (%)85.0ΚαλύτεροF1 λήξης (%)36.0
Dagstuhl ChoirSet	YourMT3+Paper Table 2	2.6	F1 έναρξης (%)22.3ΚαλύτεροF1 καρέ (%)51.0F1 λήξης (%)10.8
Dagstuhl ChoirSet	MuScriptor-largeTelkNetPaper Table 2	11.5SOTA	F1 έναρξης (%)14.4F1 καρέ (%)80.7ΚαλύτεροF1 λήξης (%)11.5Καλύτερο
PHENICX-Anechoic	YourMT3+Paper Table 2	12.2	F1 έναρξης (%)56.7ΚαλύτεροF1 καρέ (%)58.9F1 λήξης (%)18.7
PHENICX-Anechoic	MuScriptor-largeTelkNetPaper Table 2	25.7SOTA	F1 έναρξης (%)56.1F1 καρέ (%)74.6ΚαλύτεροF1 λήξης (%)32.6Καλύτερο
RWC-P	YourMT3+Paper Table 2	19.1	F1 έναρξης (%)36.1F1 καρέ (%)51.6F1 λήξης (%)20.6F1 τυμπάνων (%)36.5
RWC-P	MuScriptor-largeTelkNetPaper Table 2	25.6SOTA	F1 έναρξης (%)46.1ΚαλύτεροF1 καρέ (%)61.2ΚαλύτεροF1 λήξης (%)25.6ΚαλύτεροF1 τυμπάνων (%)42.1Καλύτερο
RWC-C	YourMT3+Paper Table 2	40.5SOTA	F1 έναρξης (%)71.7ΚαλύτεροF1 καρέ (%)71.3ΚαλύτεροF1 λήξης (%)44.3ΚαλύτεροF1 τυμπάνων (%)8.7
RWC-C	MuScriptor-largeTelkNetPaper Table 2	36.0	F1 έναρξης (%)67.7F1 καρέ (%)70.5F1 λήξης (%)36.9F1 τυμπάνων (%)23.7Καλύτερο
RWC-G	YourMT3+Paper Table 2	17.2	F1 έναρξης (%)36.9F1 καρέ (%)49.4F1 λήξης (%)20.5F1 τυμπάνων (%)25.6
RWC-G	MuScriptor-largeTelkNetPaper Table 2	23.7SOTA	F1 έναρξης (%)44.7ΚαλύτεροF1 καρέ (%)58.7ΚαλύτεροF1 λήξης (%)24.4ΚαλύτεροF1 τυμπάνων (%)29.2Καλύτερο
RWC-J	YourMT3+Paper Table 2	26.4	F1 έναρξης (%)52.9F1 καρέ (%)57.2F1 λήξης (%)31.1F1 τυμπάνων (%)30.6
RWC-J	MuScriptor-largeTelkNetPaper Table 2	31.8SOTA	F1 έναρξης (%)59.4ΚαλύτεροF1 καρέ (%)62.7ΚαλύτεροF1 λήξης (%)33.9ΚαλύτεροF1 τυμπάνων (%)31.3Καλύτερο
RWC-R	YourMT3+Paper Table 2	23.1SOTA	F1 έναρξης (%)46.1F1 καρέ (%)61.5F1 λήξης (%)28.6ΚαλύτεροF1 τυμπάνων (%)51.3Καλύτερο
RWC-R	MuScriptor-largeTelkNetPaper Table 2	20.3	F1 έναρξης (%)47.1ΚαλύτεροF1 καρέ (%)68.6ΚαλύτεροF1 λήξης (%)24.8F1 τυμπάνων (%)36.5

Μελέτη κλίμακας μοντέλου MuScriptor

MuScriptor Table 4

Ο Πίνακας 4 χρησιμοποιεί εκπαίδευση μόνο με D_Real και το ίδιο ιδιωτικό D_Test. Τα μεγέθη των γραμμών είναι ετικέτες της εργασίας, όχι οι ακριβείς παράμετροι των δημόσιων checkpoints.

Χαρτί και σημειώσεις αναφοράς	Μοντέλο	F1 πολλαπλών οργάνων (%)	Αναλυτικές μετρήσεις
D_Real only / conditioning on	MuScriptor 60MPaper Table 4	35.2	F1 έναρξης (%)47.7F1 καρέ (%)65.7F1 λήξης (%)35.3F1 τυμπάνων (%)39.8
D_Real only / conditioning on	MuScriptor 100MPaper Table 4	38.2	F1 έναρξης (%)51.2F1 καρέ (%)67.2F1 λήξης (%)38.7F1 τυμπάνων (%)41.5
D_Real only / conditioning on	MuScriptor 300MPaper Table 4	39.7	F1 έναρξης (%)52.4F1 καρέ (%)68.0F1 λήξης (%)40.3F1 τυμπάνων (%)42.0
D_Real only / conditioning on	MuScriptor 1.3BPaper Table 4	40.5	F1 έναρξης (%)53.2F1 καρέ (%)68.7F1 λήξης (%)41.0F1 τυμπάνων (%)42.5

Περιπτώσεις χρήσης

Ελέγξτε εάν οι υποστηριζόμενες μορφές εισόδου ταιριάζουν με το υλικό σας

Επιβεβαιώστε εάν το αποτέλεσμα ταιριάζει στην τρέχουσα ροή εργασίας σας

Ζυγίστε runtime και τις πιστώσεις για να αποφασίσετε εάν η μαζική επεξεργασία έχει νόημα

Ροή εργασιών

1Προετοιμάστε ένα αρχείο εισόδου που ταιριάζει με τις απαιτήσεις μορφής

2Επιβεβαιώστε τις παραμέτρους και υποβάλετε την εργασία

3Παρακολουθήστε το αποτέλεσμα στη σελίδα εργασιών και κατεβάστε το αρχείο εξόδου

Λίστα ελέγχου πριν από την πτήση

Επιβεβαιώστε ότι το αρχείο εισόδου πληροί τα όρια μορφής και μεγέθους

Επικυρώστε πρώτα το αποτέλεσμα με ένα αντιπροσωπευτικό δείγμα

Ελέγξτε ξανά τις εκτιμήσεις πίστωσης και runtime πριν από την επεξεργασία παρτίδας

Μεταγραφή πολλαπλών οργάνων MuScriptor

Μοντέλα, παράμετροι και πηγές

MuScriptor-large

Διάγραμμα αναφοράς: Σύγκριση MuScriptor-large που αναφέρουν οι συγγραφείς / MuScriptor έναντι YourMT3+ σε οκτώ δημόσια σύνολα / Μελέτη κλίμακας μοντέλου MuScriptor

Σύγκριση MuScriptor-large που αναφέρουν οι συγγραφείς

MuScriptor έναντι YourMT3+ σε οκτώ δημόσια σύνολα

Μελέτη κλίμακας μοντέλου MuScriptor

Επίσημα / αποθετήρια

Έγγραφα / τεχνικές σημειώσεις

Οδηγός παραμέτρων

Περιπτώσεις χρήσης

Ροή εργασιών

Λίστα ελέγχου πριν από την πτήση

Γρήγορα σχόλια