WildSongBench
Wybierz zbiór danych, aby zobaczyć wszystkie metryki każdego modelu. Wiersze są uporządkowane według oficjalnej pozycji lub wybranej metryki. Pogrubienie oznacza najlepszą porównywalną wartość w kolumnie, także przy remisie. Różne protokoły oceny są klasyfikowane osobno; brakujące wyniki są oznaczone jako -.
Do wdrożenia 10 / wiersze źródłowe 10
192 zapytania chińskie/angielskie, 2026-09-12. Publiczne modele wybierają niższy PER z dwóch kandydatów po czterech przebiegach ASR; wybór z ośmiu jest oddzielny. Nakład obliczeń jest różny. MiniMax Music 3 stosuje oficjalne przepisanie zapytania, SongBloom stałe audio. YuE2 używa dekodera oceny YuE2-Vae-legacy. Wyniki autorów nie mierzą wersji Q8 ani adaptacji witryny.
| Pozycja według metryki | Model | Warunek testu | SongBench | SongEval aesthetics | SongEval · Musicality (0–5) ↑ | AudioBox quality | MuQ-MuLan (0–1) ↑ | AllMusicCaps (0–1) ↑ | Q3O (0–5) ↑ | PER (%) ↓ | |
|---|---|---|---|---|---|---|---|---|---|---|---|
| μ7 (0–10) ↑ | Musicality (0–10) ↑ | ||||||||||
| 1 | YuE2 (best-of-8) | bestOf8 | 6.963229315476184 | 6.266602604166664 | 4.296048333333334 | 4.250610416666664 | 8.271365446348986 | 0.5050805467180908 | 0.398045457637636 | 4.70087253751977 | 9.786539961704843 |
| 2 | YuE2 | standard | 6.731599404761909 | 5.907463020833336 | 4.262452916666666 | 4.2151218749999995 | 8.25979095697403 | 0.5068482221880307 | 0.40536119728009606 | 4.681896986601725 | 8.443630690279864 |
| 3 | LeVo 2Publiczne wagi · Kod inferencjilglg666/SongGeneration-v2-large@115805364ad74479fb3764fe65970c92faeb1a5aKod inferencjiUstawienia ocenyNie zadeklarowano licencji wag | standard | 6.324671800595234 | 5.4589927083333345 | 4.023369479166667 | 3.981881250000001 | 8.396623315910498 | 0.3542381529114209 | 0.2679880544101252 | 3.9457878565807953 | 26.116136186343976 |
| 4 | MiniMax Music 3Publiczne wagi · Kod inferencjiMiniMaxAI/MiniMax-Music3@fbdf52fbaaca799592917417eb05f1899f1255ecKod inferencjiUstawienia ocenyNie zadeklarowano licencji wag | standard | 6.282988392857145 | 5.348229166666669 | 4.099352187500001 | 4.0430729166666675 | 8.28245102117459 | 0.39279851930526394 | 0.36085424468425725 | 4.43616720498247 | 6.268414232388418 |
| 5 | HeartMuLa | standard | 6.248347544642855 | 5.496267708333332 | 4.551859166666667 | 4.5329015625 | 8.293305036922296 | 0.3823466453177389 | 0.2786190857962841 | 3.490655976705673 | 10.705881594471055 |
| 6 | Muse | standard | 6.034903943452382 | 5.169220312499998 | 3.788667708333335 | 3.736199999999999 | 8.051745663086573 | 0.3936510290513979 | 0.3465821466803997 | 4.403758449771435 | 33.41864858069383 |
| 7 | ACE-Step 1.5 | standard | 6.011793824404761 | 5.158814583333332 | 3.846484166666666 | 3.805107291666667 | 8.051833018660545 | 0.43723272854307044 | 0.38685302749703016 | 4.580894501177339 | 7.457884998484957 |
| 8 | DiffRhythm 2 | standard | 5.242845982142859 | 4.477539583333331 | 3.5244677083333333 | 3.471093229166668 | 7.978225273390611 | 0.37817035724098486 | 0.32549789230688475 | 4.087044602340498 | 18.413265339015286 |
| 9 | YuE 1 | standard | 4.916463244047622 | 4.084726562499998 | 3.214967395833334 | 3.1524088541666675 | 7.868339642882347 | 0.262323199029197 | 0.2881557388876293 | 3.7300764989993715 | 36.37846445448743 |
| 10 | SongBloomPubliczne wagi · Kod inferencjirsxdalv/SongBloom@093351709a0efa263569cc4b679429d38f4508ecKod inferencjiUstawienia ocenyNie zadeklarowano licencji wag | standard | 4.235043750000001 | 3.4492635416666655 | 3.2051130208333345 | 3.204842187499999 | 8.153916046023369 | 0.2697471845106823 | 0.19264957021005102 | 3.0286910546158463 | 19.193351857701906 |