STARS: A Unified Framework for Singing Transcription, Alignment, and Refined Style Annotation
ACL Findings - 2025
Chargement...
Nécessite l’audio vocal, les paroles, les phonèmes et leur correspondance avec les mots. Exporte le MIDI, les temps des phonèmes et mots, et les techniques vocales ; ce n’est pas un mode audio seul.
Entrée
Prend en charge les entrées dans des formats tels que mp3 / wav / flac / ogg / m4a / aac / aif / aiff / mp4 / mov / mkv
Formats pris en charge
Production
MIDI / JSON
Cas d’utilisation
Modifier les notes, l'instrumentation et les détails d'interprétation.
Choisissez un modèle adapté à votre contenu et à votre objectif, puis consultez les exemples avant de lancer la tâche.
Coût, durée, formats et paramètres dépendent du modèle choisi.
STARS · Chinese : Modifier les notes, l'instrumentation et les détails d'interprétation.
STARS · Bilingual : Modifier les notes, l'instrumentation et les détails d'interprétation.
ACL Findings - 2025
Inclut les résultats publics de modèles utilisés ici et ailleurs. Le tableau complet de la source est affiché par défaut ; les conditions et les métriques peuvent aussi être sélectionnées pour comparaison. Les scores obtenus dans des conditions différentes ne sont pas directement comparables.
Seuls les résultats dont l’implémentation d’inférence publique et les poids correspondants ont été vérifiés sont affichés, ainsi que les algorithmes sans poids entraînés. Les services fermés, les poids non publiés et les versions expérimentales non identifiées sont exclus. Ce classement ne couvre pas tous les modèles.
Des poids publics ne prouvent pas l’existence d’une licence open source complète. Dépliez les données pour consulter les licences déclarées et les conditions d’accès. Les licences non déclarées sont signalées séparément.
Choisissez un jeu de données pour afficher toutes les métriques de chaque modèle. Les lignes suivent le classement officiel ou la métrique sélectionnée. Le gras indique la meilleure valeur comparable de chaque colonne, y compris les ex æquo. Les protocoles d’évaluation différents sont classés séparément ; les scores manquants sont affichés par -.
Entrées déployables 3 / lignes d’origine 3
Les valeurs proviennent de la source publique liée. Les libellés des lignes indiquent le jeu de test ou le checkpoint ; les scores non publiés sont affichés sous la forme -.
| Classement par métrique | Modèle | COnPOff(F) ↑ | RPA ↑ |
|---|---|---|---|
| 1 | STARS (ours)Modèle utilisé iciPoids publics · Code d’inférence | 71.0 | 86.7 |
| 2 | ROSVOTPoids publics · Code d’inférence | 70.2 | 83.8 |
| 3 | VOCANOPoids publics · Code d’inférence | 50.2 | 76.6 |
Les repères indiquent les modèles ou composants utilisés ici. Les scores et réglages proviennent des tests cités, et non d’une nouvelle évaluation du traitement complet du site.
Jeux de données, versions et conditions restent distincts, même sans lignes admissibles au classement.
Entrées déployables 3 / lignes d’origine 3
Entrées déployables 2 / lignes d’origine 6
Aucun ensemble public complet d’inférence n’a été vérifié pour ces expériences. D’autres poids portant le même nom ne suffisent pas.
w/o CTC · w/o VQ · w/o MOE · Conv
Les scores concernent le jeu de données, la métrique et la version indiqués. Des tests différents ne sont pas directement comparables.
Choisissez un jeu de données pour afficher toutes les métriques de chaque modèle. Les lignes suivent le classement officiel ou la métrique sélectionnée. Le gras indique la meilleure valeur comparable de chaque colonne, y compris les ex æquo. Les protocoles d’évaluation différents sont classés séparément ; les scores manquants sont affichés par -.
Entrées déployables 3 / lignes d’origine 3
Les valeurs proviennent de la source publique liée. Les libellés des lignes indiquent le jeu de test ou le checkpoint ; les scores non publiés sont affichés sous la forme -.
| Classement par métrique | Modèle | COnPOff(F) ↑ | RPA ↑ |
|---|---|---|---|
| 1 | STARS (ours)Poids publics · Code d’inférence | 71.0 | 86.7 |
| 2 | ROSVOTPoids publics · Code d’inférence | 70.2 | 83.8 |
| 3 | VOCANOPoids publics · Code d’inférence | 50.2 | 76.6 |
Choisissez un jeu de données pour afficher toutes les métriques de chaque modèle. Les lignes suivent le classement officiel ou la métrique sélectionnée. Le gras indique la meilleure valeur comparable de chaque colonne, y compris les ex æquo. Les protocoles d’évaluation différents sont classés séparément ; les scores manquants sont affichés par -.
Entrées déployables 2 / lignes d’origine 6
Aucun ensemble public complet d’inférence n’a été vérifié pour ces expériences. D’autres poids portant le même nom ne suffisent pas.
w/o CTC · w/o VQ · w/o MOE · Conv
Les valeurs proviennent de la source publique liée. Les libellés des lignes indiquent le jeu de test ou le checkpoint ; les scores non publiés sont affichés sous la forme -.
| Classement par métrique | Modèle | BER ↓ | IOU ↑ | COnPOff(F) ↑ | RPA ↑ | T-F1 ↑ | T-ACC ↑ | S-ACC ↑ |
|---|---|---|---|---|---|---|---|---|
| 1 | STARSPoids publics · Code d’inférence | 18.6 | 80.9 | 71.0 | 86.7 | 79.9 | 91.5 | 68.0 |
| 2 | BilingualPoids publics · Code d’inférencestars_chinese_english_bilingual/model_ckpt_steps_300000.ckptCode d’inférenceLicence des poids non déclarée | 19.4 | 75.6 | 68.1 | 86.2 | 76.8 | 91.4 | 70.4 |
Précisez l'outil, les étapes et le problème dans votre retour. Des captures d'écran peuvent aider à le localiser.