STARS: A Unified Framework for Singing Transcription, Alignment, and Refined Style Annotation
ACL Findings - 2025
Φόρτωση...
Απαιτεί φωνητικό ήχο, στίχους, φωνήματα και αντιστοίχιση φωνημάτων σε λέξεις. Εξάγει MIDI, χρονισμούς φωνημάτων/λέξεων και τεχνικές φωνής· δεν λειτουργεί μόνο με ήχο.
Εισαγωγή
Υποστηρίζει εισόδους σε μορφές όπως mp3 / wav / flac / ogg / m4a / aac / aif / aiff / mp4 / mov / mkv
Υποστηριζόμενες μορφές
Παραγωγή
MIDI / JSON
Περίπτωση χρήσης
Επεξεργασία νοτών, ενορχήστρωσης και λεπτομερειών εκτέλεσης.
Επιλέξτε μοντέλο για το υλικό και τον σκοπό σας και δείτε τα παραδείγματα πριν από την υποβολή.
Κόστος, χρόνος, μορφές και παράμετροι εξαρτώνται από το επιλεγμένο μοντέλο.
STARS · Bilingual: Επεξεργασία νοτών, ενορχήστρωσης και λεπτομερειών εκτέλεσης.
STARS · Chinese: Επεξεργασία νοτών, ενορχήστρωσης και λεπτομερειών εκτέλεσης.
ACL Findings - 2025
Περιλαμβάνει δημόσια αποτελέσματα δοκιμών μοντέλων που χρησιμοποιούνται εδώ και αλλού. Από προεπιλογή εμφανίζεται ο πλήρης πίνακας της πηγής· μπορείτε επίσης να επιλέξετε συνθήκες και μετρικές για σύγκριση. Βαθμολογίες από διαφορετικές συνθήκες δεν συγκρίνονται άμεσα.
Εμφανίζονται μόνο εγγραφές με επαληθευμένη δημόσια υλοποίηση συμπερασμού και αντίστοιχα βάρη, καθώς και αλγόριθμοι που δεν χρειάζονται βάρη. Εξαιρούνται κλειστές υπηρεσίες, μη δημοσιευμένα βάρη και μη ταυτοποιημένες πειραματικές εκδόσεις. Δεν πρόκειται για κατάταξη όλων των μοντέλων.
Τα δημόσια βάρη δεν τεκμηριώνουν πλήρη άδεια ανοικτού κώδικα. Αναπτύξτε τα δεδομένα για τις δηλωμένες άδειες βαρών και τους όρους πρόσβασης. Οι μη δηλωμένες άδειες επισημαίνονται χωριστά.
Επιλέξτε ένα σύνολο δεδομένων για να δείτε όλες τις μετρικές κάθε μοντέλου. Οι γραμμές ακολουθούν την επίσημη κατάταξη ή την επιλεγμένη μετρική. Η έντονη γραφή δείχνει την καλύτερη συγκρίσιμη τιμή κάθε στήλης, μαζί με τις ισοβαθμίες. Τα διαφορετικά πρωτόκολλα αξιολόγησης κατατάσσονται χωριστά· οι βαθμολογίες που λείπουν εμφανίζονται ως -.
Τοπικά εκτελέσιμα 2 / αρχικές γραμμές 6
Δεν έχει επαληθευτεί πλήρες δημόσιο πακέτο εξαγωγής συμπερασμάτων για αυτά τα πειράματα. Άλλα βάρη με το ίδιο όνομα μοντέλου δεν αρκούν.
w/o CTC · w/o VQ · w/o MOE · Conv
Οι τιμές προέρχονται από τη συνδεδεμένη δημόσια πηγή. Οι ετικέτες των γραμμών προσδιορίζουν το σύνολο δοκιμής ή το checkpoint· οι μη δημοσιευμένες βαθμολογίες εμφανίζονται ως -.
| Κατάταξη ανά μετρική | Μοντέλο | BER ↓ | IOU ↑ | COnPOff(F) ↑ | RPA ↑ | T-F1 ↑ | T-ACC ↑ | S-ACC ↑ |
|---|---|---|---|---|---|---|---|---|
| 1 | STARSΔημόσια βάρη · Κώδικας συμπερασμού | 18.6 | 80.9 | 71.0 | 86.7 | 79.9 | 91.5 | 68.0 |
| 2 | BilingualΜοντέλο του ιστοτόπουΔημόσια βάρη · Κώδικας συμπερασμούstars_chinese_english_bilingual/model_ckpt_steps_300000.ckptΚώδικας συμπερασμούΔεν έχει δηλωθεί άδεια βαρών | 19.4 | 75.6 | 68.1 | 86.2 | 76.8 | 91.4 | 70.4 |
Οι ενδείξεις επισημαίνουν μοντέλα ή στοιχεία που χρησιμοποιούνται εδώ. Οι βαθμολογίες και οι ρυθμίσεις προέρχονται από τις αναφερόμενες δοκιμές, όχι από νέα αξιολόγηση ολόκληρης της επεξεργασίας του ιστοτόπου.
Σύνολα δεδομένων, εκδόσεις και συνθήκες παραμένουν χωριστά, ακόμη και πηγές χωρίς επιλέξιμες γραμμές.
Τοπικά εκτελέσιμα 3 / αρχικές γραμμές 3
Τοπικά εκτελέσιμα 2 / αρχικές γραμμές 6
Δεν έχει επαληθευτεί πλήρες δημόσιο πακέτο εξαγωγής συμπερασμάτων για αυτά τα πειράματα. Άλλα βάρη με το ίδιο όνομα μοντέλου δεν αρκούν.
w/o CTC · w/o VQ · w/o MOE · Conv
Οι βαθμολογίες αφορούν το συγκεκριμένο σύνολο δεδομένων, μέτρο και έκδοση μοντέλου· διαφορετικές δοκιμές δεν συγκρίνονται άμεσα.
Επιλέξτε ένα σύνολο δεδομένων για να δείτε όλες τις μετρικές κάθε μοντέλου. Οι γραμμές ακολουθούν την επίσημη κατάταξη ή την επιλεγμένη μετρική. Η έντονη γραφή δείχνει την καλύτερη συγκρίσιμη τιμή κάθε στήλης, μαζί με τις ισοβαθμίες. Τα διαφορετικά πρωτόκολλα αξιολόγησης κατατάσσονται χωριστά· οι βαθμολογίες που λείπουν εμφανίζονται ως -.
Τοπικά εκτελέσιμα 3 / αρχικές γραμμές 3
Οι τιμές προέρχονται από τη συνδεδεμένη δημόσια πηγή. Οι ετικέτες των γραμμών προσδιορίζουν το σύνολο δοκιμής ή το checkpoint· οι μη δημοσιευμένες βαθμολογίες εμφανίζονται ως -.
| Κατάταξη ανά μετρική | Μοντέλο | COnPOff(F) ↑ | RPA ↑ |
|---|---|---|---|
| 1 | STARS (ours)Δημόσια βάρη · Κώδικας συμπερασμού | 71.0 | 86.7 |
| 2 | ROSVOTΔημόσια βάρη · Κώδικας συμπερασμού | 70.2 | 83.8 |
| 3 | VOCANOΔημόσια βάρη · Κώδικας συμπερασμού | 50.2 | 76.6 |
Επιλέξτε ένα σύνολο δεδομένων για να δείτε όλες τις μετρικές κάθε μοντέλου. Οι γραμμές ακολουθούν την επίσημη κατάταξη ή την επιλεγμένη μετρική. Η έντονη γραφή δείχνει την καλύτερη συγκρίσιμη τιμή κάθε στήλης, μαζί με τις ισοβαθμίες. Τα διαφορετικά πρωτόκολλα αξιολόγησης κατατάσσονται χωριστά· οι βαθμολογίες που λείπουν εμφανίζονται ως -.
Τοπικά εκτελέσιμα 2 / αρχικές γραμμές 6
Δεν έχει επαληθευτεί πλήρες δημόσιο πακέτο εξαγωγής συμπερασμάτων για αυτά τα πειράματα. Άλλα βάρη με το ίδιο όνομα μοντέλου δεν αρκούν.
w/o CTC · w/o VQ · w/o MOE · Conv
Οι τιμές προέρχονται από τη συνδεδεμένη δημόσια πηγή. Οι ετικέτες των γραμμών προσδιορίζουν το σύνολο δοκιμής ή το checkpoint· οι μη δημοσιευμένες βαθμολογίες εμφανίζονται ως -.
| Κατάταξη ανά μετρική | Μοντέλο | BER ↓ | IOU ↑ | COnPOff(F) ↑ | RPA ↑ | T-F1 ↑ | T-ACC ↑ | S-ACC ↑ |
|---|---|---|---|---|---|---|---|---|
| 1 | STARSΔημόσια βάρη · Κώδικας συμπερασμού | 18.6 | 80.9 | 71.0 | 86.7 | 79.9 | 91.5 | 68.0 |
| 2 | BilingualΔημόσια βάρη · Κώδικας συμπερασμούstars_chinese_english_bilingual/model_ckpt_steps_300000.ckptΚώδικας συμπερασμούΔεν έχει δηλωθεί άδεια βαρών | 19.4 | 75.6 | 68.1 | 86.2 | 76.8 | 91.4 | 70.4 |
Στα σχόλιά σας αναφέρετε το εργαλείο, τα βήματα και το πρόβλημα. Τα στιγμιότυπα οθόνης βοηθούν στον εντοπισμό του.