Caricamento...

Trascrizione vocale con testo · STARS · TelkNet

MIDI / trascrizioneGPU carico di lavoroSTARS · Codice sorgente STARS · Pesi STARS · Pesi STARS · Chinese · Articolo

Trascrizione vocale con testo

Richiede audio vocale, testo, fonemi e mappa fonema-parola. Esporta MIDI, tempi di fonemi e parole e tecniche vocali; non è un percorso solo audio.

25 crediti/utilizzoInserimento fileMassimo 100 MBStima 60-2400 secondi

Input

Supporta ingressi in formati come mp3 / wav / flac / ogg / m4a / aac / aif / aiff / mp4 / mov / mkv

Formati supportati

mp3wavflacoggm4aaacaifaiffmp4movmkv

Produzione

MIDI / JSON

Caso d'uso

Modificare note, strumentazione e dettagli dell'esecuzione.

Scegli una famiglia di modelli

Trascrizione vocale con testo · STARSDisponibileTrascrive note e tempi del testo da voce, parole e fonemi; scegli la lingua del testo.

Scegli una versione o modalità di elaborazione

Trascrizione vocale con testo · STARS · ChineseTrascrizione vocale guidata da testi cinesi, con note e allineamento temporale.ConsigliatoDisponibileTrascrizione vocale con testo · STARS · BilingualTrascrizione con testi cinesi, inglesi o misti, con note e allineamento temporale.Disponibile

Scegli un modello adatto al materiale e allo scopo, poi consulta gli esempi prima di inviare.

Costo, tempo, formati e parametri dipendono dal modello scelto.

Feedback rapido

Nel feedback indica lo strumento, i passaggi e il problema. Gli screenshot possono aiutare a individuarlo.

Modelli, parametri e fonti

STARS · Chinese: Modificare note, strumentazione e dettagli dell'esecuzione.

STARS · ChineseSTARS paper, Table 2STARS ChineseROSVOTVOCANOSTARS paper, Table 4STARS BilingualSTARS: A Unified Framework for Singing Transcription, Alignment, and Refined Style AnnotationSTARS · Bilingual

STARS · Chinese

STARS source (pinned)STARS weights (pinned)STARS paper

Inserisci un array JSON o parole separate da spazi. Il cinese continuo viene diviso in caratteri.
Inserisci un array JSON o fonemi separati da spazi/virgole secondo il set STARS scelto.
Inserisci un indice di parola a base zero per ogni fonema; il numero deve coincidere con quello dei fonemi.

STARS · Bilingual

STARS · Bilingual: Modificare note, strumentazione e dettagli dell'esecuzione.

STARS source (pinned)STARS weights (pinned)STARS paper

Inserisci un array JSON o parole separate da spazi. Il cinese continuo viene diviso in caratteri.
Inserisci un array JSON o fonemi separati da spazi/virgole secondo il set STARS scelto.
Inserisci un indice di parola a base zero per ogni fonema; il numero deve coincidere con quello dei fonemi.

Note di carta e benchmark

STARS: A Unified Framework for Singing Transcription, Alignment, and Refined Style Annotation

ACL Findings - 2025

Paper Project demo

Ufficiali / repository

STARS source (pinned)STARS weights (pinned)

Articoli / note tecniche

STARS paper

Guida ai parametri

Inserisci un array JSON o parole separate da spazi. Il cinese continuo viene diviso in caratteri.
Inserisci un array JSON o fonemi separati da spazi/virgole secondo il set STARS scelto.
Inserisci un indice di parola a base zero per ogni fonema; il numero deve coincidere con quello dei fonemi.

Flusso di lavoro

1Carica il canto e inserisci testo, fonemi e indici fonema-parola.
2Genera MIDI e annotazioni con STARS, poi verifica i tempi di note e testo.

Cosa controllare

Inserisci un array JSON o parole separate da spazi. Il cinese continuo viene diviso in caratteri.
Inserisci un array JSON o fonemi separati da spazi/virgole secondo il set STARS scelto.
Inserisci un indice di parola a base zero per ogni fonema; il numero deve coincidere con quello dei fonemi.

Modelli del settore

3 risultati

Include risultati pubblici dei modelli usati qui e altrove. Per impostazione predefinita viene mostrata la tabella completa della fonte; è anche possibile scegliere condizioni e metriche da confrontare. I punteggi ottenuti in condizioni diverse non sono direttamente confrontabili.

Sono mostrati solo risultati con implementazione pubblica di inferenza e pesi corrispondenti verificati, oltre agli algoritmi che non richiedono pesi. Sono esclusi servizi chiusi, pesi non pubblicati e versioni sperimentali non identificate. Non è una classifica di tutti i modelli.

I pesi pubblici non dimostrano l’esistenza di una licenza open source completa. Espandi i dati per consultare le licenze dichiarate e le condizioni di accesso. Le licenze non dichiarate sono indicate separatamente.

BenchmarkCategoria

STARS paper, Table 2

Scegli un insieme di dati per visualizzare tutte le metriche di ciascun modello. Le righe seguono la classifica ufficiale o la metrica selezionata. Il grassetto indica il miglior valore confrontabile di ogni colonna, inclusi i pari merito. Protocolli di valutazione diversi sono classificati separatamente; i punteggi mancanti sono indicati con -.

Voci distribuibili 3 / righe originali 3

I valori provengono dalla fonte pubblica collegata. Le etichette delle righe indicano il set di test o il checkpoint; i punteggi non pubblicati sono mostrati come -.

Classifica per metrica

STARS paper, Table 2
Classifica per metrica	Modello	COnPOff(F) ↑	RPA ↑
1	STARS (ours)Modello usato qui Pesi pubblici · Codice di inferenza stars_chinese/model_ckpt_steps_200000.ckpt Codice di inferenzaLicenza dei pesi non dichiarata	71.0	86.7
2	ROSVOT Pesi pubblici · Codice di inferenza checkpoints.zip · rosvot + rwbd + rmvpe Codice di inferenzaLicenza dei pesi non dichiarata	70.2	83.8
3	VOCANO Pesi pubblici · Codice di inferenza VOCANO segmentation Patch-CNN pitch Codice di inferenza`model.pt`Licenza dei pesi non dichiarata	50.2	76.6

Dati originali (3)

Le etichette indicano modelli o componenti usati qui. Punteggi e impostazioni provengono dai test citati, non da una nuova valutazione dell’intero processo del sito.

STARS paper, Table 2 ↗Verificato: 2026-10-25

Tutte le fonti di valutazione (2)

Dataset, versioni e condizioni restano separati, anche per fonti senza righe ammesse in classifica.

STARS paper, Table 2 ↗
Voci distribuibili 3 / righe originali 3
STARS paper, Table 4 ↗
Voci distribuibili 2 / righe originali 6
Non classificati: 4
Non è stato verificato un pacchetto pubblico completo di inferenza per questi esperimenti. Altri pesi con lo stesso nome non sono equivalenti.
w/o CTC · w/o VQ · w/o MOE · Conv

Tutti i risultati originali e le fonti

I punteggi si riferiscono al dataset, alla metrica e alla versione indicati; test diversi non sono direttamente confrontabili.

STARS paper, Table 2

Voci distribuibili 3 / righe originali 3

I valori provengono dalla fonte pubblica collegata. Le etichette delle righe indicano il set di test o il checkpoint; i punteggi non pubblicati sono mostrati come -.

Classifica per metrica

STARS paper, Table 2
Classifica per metrica	Modello	COnPOff(F) ↑	RPA ↑
1	STARS (ours) Pesi pubblici · Codice di inferenza stars_chinese/model_ckpt_steps_200000.ckpt Codice di inferenzaLicenza dei pesi non dichiarata	71.0	86.7
2	ROSVOT Pesi pubblici · Codice di inferenza checkpoints.zip · rosvot + rwbd + rmvpe Codice di inferenzaLicenza dei pesi non dichiarata	70.2	83.8
3	VOCANO Pesi pubblici · Codice di inferenza VOCANO segmentation Patch-CNN pitch Codice di inferenza`model.pt`Licenza dei pesi non dichiarata	50.2	76.6

Dati originali (3)

STARS paper, Table 2 ↗Verificato: 2026-10-25

STARS paper, Table 4

Voci distribuibili 2 / righe originali 6

Non classificati: 4

Non è stato verificato un pacchetto pubblico completo di inferenza per questi esperimenti. Altri pesi con lo stesso nome non sono equivalenti.

w/o CTC · w/o VQ · w/o MOE · Conv

I valori provengono dalla fonte pubblica collegata. Le etichette delle righe indicano il set di test o il checkpoint; i punteggi non pubblicati sono mostrati come -.

Classifica per metrica

STARS paper, Table 4
Classifica per metrica	Modello	BER ↓	IOU ↑	COnPOff(F) ↑	RPA ↑	T-F1 ↑	T-ACC ↑	S-ACC ↑
1	STARS Pesi pubblici · Codice di inferenza stars_chinese/model_ckpt_steps_200000.ckpt Codice di inferenzaLicenza dei pesi non dichiarata	18.6	80.9	71.0	86.7	79.9	91.5	68.0
2	Bilingual Pesi pubblici · Codice di inferenza stars_chinese_english_bilingual/model_ckpt_steps_300000.ckpt Codice di inferenzaLicenza dei pesi non dichiarata	19.4	75.6	68.1	86.2	76.8	91.4	70.4

Dati originali (2)

STARS paper, Table 4 ↗Verificato: 2026-10-25