STARS: A Unified Framework for Singing Transcription, Alignment, and Refined Style Annotation
ACL Findings - 2025
Yükleniyor...
Vokal sesine ek olarak sözler, fonemler ve fonem-sözcük eşlemesi gerekir. Nota MIDI’si, fonem/sözcük zamanları ve vokal teknikleri üretir; yalnız sesle çalışmaz.
Giriş
Girişleri mp3 / wav / flac / ogg / m4a / aac / aif / aiff / mp4 / mov / mkv gibi formatlarda destekler
Desteklenen formatlar
Çıktı
MIDI / JSON
Kullanım Durumu
Notaları, enstrümantasyonu ve icra ayrıntılarını düzenleyin.
Malzemenize ve amacınıza uygun modeli seçin, göndermeden önce örnekleri inceleyin.
Ücret, süre, biçimler ve parametreler seçilen modele bağlıdır.
STARS · Bilingual: Notaları, enstrümantasyonu ve icra ayrıntılarını düzenleyin.
STARS · Chinese: Notaları, enstrümantasyonu ve icra ayrıntılarını düzenleyin.
ACL Findings - 2025
Burada ve diğer hizmetlerde kullanılan modellerin herkese açık test sonuçlarını içerir. Varsayılan olarak kaynaktaki tam tablo gösterilir; karşılaştırmak için koşullar ve ölçütler de seçilebilir. Farklı test koşullarındaki puanlar doğrudan karşılaştırılamaz.
Yalnızca herkese açık çıkarım uygulaması ve eşleşen ağırlıkları doğrulanmış kayıtlar ile ağırlık gerektirmeyen algoritmalar gösterilir. Kapalı hizmetler, yayımlanmamış ağırlıklar ve eşleşmeyen deney sürümleri dışarıda bırakılır. Bu, tüm modellerin genel sıralaması değildir.
Herkese açık ağırlıklar, eksiksiz bir açık kaynak lisansını doğrulamaz. Beyan edilen ağırlık lisanslarını ve erişim koşullarını görmek için verileri genişletin. Beyan edilmemiş lisanslar ayrıca işaretlenir.
Her modelin tüm ölçümlerini görmek için bir veri kümesi seçin. Satırlar resmî sıraya veya seçilen ölçüme göre sıralanır. Kalın yazı, eşitlikler dâhil her sütundaki karşılaştırılabilir en iyi değeri gösterir. Farklı değerlendirme protokolleri ayrı sıralanır; eksik puanlar - ile gösterilir.
Dağıtılabilir 2 / kaynak satırı 6
Bu deneyler için tam bir açık çıkarım paketi doğrulanmadı. Aynı adlı modelin farklı ağırlıkları yerine kullanılamaz.
w/o CTC · w/o VQ · w/o MOE · Conv
Değerler, bağlantısı verilen herkese açık kaynaktan alınır. Satır etiketleri test kümesini veya kontrol noktasını belirtir; bildirilmeyen puanlar - olarak gösterilir.
| Ölçüme göre sıra | Model | BER ↓ | IOU ↑ | COnPOff(F) ↑ | RPA ↑ | T-F1 ↑ | T-ACC ↑ | S-ACC ↑ |
|---|---|---|---|---|---|---|---|---|
| 1 | STARSAçık ağırlıklar · Çıkarım kodu | 18.6 | 80.9 | 71.0 | 86.7 | 79.9 | 91.5 | 68.0 |
| 2 | BilingualSitede kullanılan modelAçık ağırlıklar · Çıkarım kodustars_chinese_english_bilingual/model_ckpt_steps_300000.ckptÇıkarım koduAğırlık lisansı beyan edilmemiş | 19.4 | 75.6 | 68.1 | 86.2 | 76.8 | 91.4 | 70.4 |
İşaretler burada kullanılan modelleri veya bileşenleri gösterir. Puanlar ve ayarlar, sitenin tüm işlem zincirinin yeni bir değerlendirmesinden değil, belirtilen testlerden alınmıştır.
Veri kümeleri, sürümler ve koşullar ayrı tutulur; uygun sıralama satırı olmayan kaynaklar da kalır.
Dağıtılabilir 3 / kaynak satırı 3
Dağıtılabilir 2 / kaynak satırı 6
Bu deneyler için tam bir açık çıkarım paketi doğrulanmadı. Aynı adlı modelin farklı ağırlıkları yerine kullanılamaz.
w/o CTC · w/o VQ · w/o MOE · Conv
Puanlar belirtilen veri kümesi, ölçüt ve model sürümü için geçerlidir; farklı testler doğrudan karşılaştırılamaz.
Her modelin tüm ölçümlerini görmek için bir veri kümesi seçin. Satırlar resmî sıraya veya seçilen ölçüme göre sıralanır. Kalın yazı, eşitlikler dâhil her sütundaki karşılaştırılabilir en iyi değeri gösterir. Farklı değerlendirme protokolleri ayrı sıralanır; eksik puanlar - ile gösterilir.
Dağıtılabilir 3 / kaynak satırı 3
Değerler, bağlantısı verilen herkese açık kaynaktan alınır. Satır etiketleri test kümesini veya kontrol noktasını belirtir; bildirilmeyen puanlar - olarak gösterilir.
| Ölçüme göre sıra | Model | COnPOff(F) ↑ | RPA ↑ |
|---|---|---|---|
| 1 | STARS (ours)Açık ağırlıklar · Çıkarım kodu | 71.0 | 86.7 |
| 2 | ROSVOTAçık ağırlıklar · Çıkarım kodu | 70.2 | 83.8 |
| 3 | VOCANOAçık ağırlıklar · Çıkarım kodu | 50.2 | 76.6 |
Her modelin tüm ölçümlerini görmek için bir veri kümesi seçin. Satırlar resmî sıraya veya seçilen ölçüme göre sıralanır. Kalın yazı, eşitlikler dâhil her sütundaki karşılaştırılabilir en iyi değeri gösterir. Farklı değerlendirme protokolleri ayrı sıralanır; eksik puanlar - ile gösterilir.
Dağıtılabilir 2 / kaynak satırı 6
Bu deneyler için tam bir açık çıkarım paketi doğrulanmadı. Aynı adlı modelin farklı ağırlıkları yerine kullanılamaz.
w/o CTC · w/o VQ · w/o MOE · Conv
Değerler, bağlantısı verilen herkese açık kaynaktan alınır. Satır etiketleri test kümesini veya kontrol noktasını belirtir; bildirilmeyen puanlar - olarak gösterilir.
| Ölçüme göre sıra | Model | BER ↓ | IOU ↑ | COnPOff(F) ↑ | RPA ↑ | T-F1 ↑ | T-ACC ↑ | S-ACC ↑ |
|---|---|---|---|---|---|---|---|---|
| 1 | STARSAçık ağırlıklar · Çıkarım kodu | 18.6 | 80.9 | 71.0 | 86.7 | 79.9 | 91.5 | 68.0 |
| 2 | BilingualAçık ağırlıklar · Çıkarım kodustars_chinese_english_bilingual/model_ckpt_steps_300000.ckptÇıkarım koduAğırlık lisansı beyan edilmemiş | 19.4 | 75.6 | 68.1 | 86.2 | 76.8 | 91.4 | 70.4 |
Geri bildiriminizde araç adını, adımları ve sorunu belirtin. Ekran görüntüleri sorunu bulmamıza yardımcı olabilir.