STARS: A Unified Framework for Singing Transcription, Alignment, and Refined Style Annotation
ACL Findings - 2025
กําลังโหลด...
ต้องมีเสียงร้อง เนื้อเพลง หน่วยเสียง และการจับคู่หน่วยเสียงกับคำ ส่งออก MIDI เวลาในระดับหน่วยเสียงและคำ และเทคนิคการร้อง จึงไม่ใช่เส้นทางที่ใช้เสียงอย่างเดียว
อินพุต
รองรับอินพุตในรูปแบบต่างๆ เช่น mp3 / wav / flac / ogg / m4a / aac / aif / aiff / mp4 / mov / mkv
รูปแบบที่รองรับ
เอาท์พุต
MIDI / JSON
กรณีการใช้งาน
แก้ไขโน้ต การจัดเครื่องดนตรี และรายละเอียดการบรรเลง
เลือกโมเดลให้เหมาะกับเนื้อหาและวัตถุประสงค์ แล้วดูตัวอย่างก่อนส่ง
ค่าใช้จ่าย เวลา รูปแบบและพารามิเตอร์ขึ้นอยู่กับโมเดลที่เลือก
STARS · Bilingual: แก้ไขโน้ต การจัดเครื่องดนตรี และรายละเอียดการบรรเลง
STARS · Chinese: แก้ไขโน้ต การจัดเครื่องดนตรี และรายละเอียดการบรรเลง
ACL Findings - 2025
รวมผลทดสอบสาธารณะของโมเดลที่ใช้ในเว็บไซต์นี้และที่อื่น โดยแสดงตารางต้นฉบับทั้งหมดเป็นค่าเริ่มต้น และสามารถเลือกเงื่อนไขกับตัวชี้วัดเพื่อเปรียบเทียบได้ คะแนนจากเงื่อนไขการทดสอบต่างกันไม่สามารถเปรียบเทียบโดยตรงได้
แสดงเฉพาะรายการที่ตรวจสอบแล้วว่ามีโค้ดอนุมานสาธารณะและน้ำหนักตรงกับรุ่นทดลอง รวมถึงอัลกอริทึมที่ไม่ต้องใช้น้ำหนัก โดยไม่รวมบริการปิด น้ำหนักที่ยังไม่เผยแพร่ หรือรุ่นทดลองที่จับคู่ไม่ได้ นี่ไม่ใช่อันดับรวมของทุกรุ่น
การเผยแพร่น้ำหนักไม่ได้ยืนยันว่ามีสัญญาอนุญาตโอเพนซอร์สครบถ้วน ขยายข้อมูลเพื่อดูสัญญาอนุญาตน้ำหนักและเงื่อนไขการเข้าถึง รายการที่ไม่ระบุสัญญาอนุญาตจะแสดงแยกต่างหาก
เลือกชุดข้อมูลเพื่อดูทุกตัวชี้วัดของแต่ละโมเดล แถวเรียงตามอันดับทางการหรือตัวชี้วัดที่เลือก ตัวหนาแสดงค่าที่ดีที่สุดที่เปรียบเทียบกันได้ในแต่ละคอลัมน์ รวมถึงค่าที่เสมอกัน วิธีประเมินที่ต่างกันจะแยกจัดอันดับ คะแนนที่ไม่มีจะแสดงเป็น "-"
ติดตั้งได้ 2 / แถวต้นฉบับ 6
ยังไม่ได้ยืนยันแพ็กเกจอนุมานสาธารณะที่ครบถ้วนสำหรับการทดลองเหล่านี้ น้ำหนักอื่นที่ชื่อโมเดลเดียวกันใช้แทนไม่ได้
w/o CTC · w/o VQ · w/o MOE · Conv
ค่าตัวเลขมาจากแหล่งข้อมูลสาธารณะที่เชื่อมโยงไว้ ป้ายกำกับแถวระบุชุดทดสอบหรือเช็กพอยต์ ส่วนคะแนนที่ไม่ได้รายงานจะแสดงด้วยเครื่องหมาย "-"
| อันดับตามตัวชี้วัด | รุ่น | BER ↓ | IOU ↑ | COnPOff(F) ↑ | RPA ↑ | T-F1 ↑ | T-ACC ↑ | S-ACC ↑ |
|---|---|---|---|---|---|---|---|---|
| 1 | STARSน้ำหนักสาธารณะ · โค้ดอนุมาน | 18.6 | 80.9 | 71.0 | 86.7 | 79.9 | 91.5 | 68.0 |
| 2 | Bilingualโมเดลที่ใช้ในเว็บไซต์น้ำหนักสาธารณะ · โค้ดอนุมาน | 19.4 | 75.6 | 68.1 | 86.2 | 76.8 | 91.4 | 70.4 |
เครื่องหมายระบุโมเดลหรือส่วนประกอบที่ใช้ที่นี่ คะแนนและการตั้งค่ามาจากการทดสอบที่อ้างอิง ไม่ใช่ผลประเมินใหม่ของกระบวนการทั้งหมดบนเว็บไซต์
แยกชุดข้อมูล รุ่น และเงื่อนไข รวมถึงแหล่งที่ยังไม่มีรายการผ่านเกณฑ์จัดอันดับ
ติดตั้งได้ 3 / แถวต้นฉบับ 3
ติดตั้งได้ 2 / แถวต้นฉบับ 6
ยังไม่ได้ยืนยันแพ็กเกจอนุมานสาธารณะที่ครบถ้วนสำหรับการทดลองเหล่านี้ น้ำหนักอื่นที่ชื่อโมเดลเดียวกันใช้แทนไม่ได้
w/o CTC · w/o VQ · w/o MOE · Conv
คะแนนอ้างอิงชุดข้อมูล ตัวชี้วัด และรุ่นโมเดลที่ระบุ จึงเปรียบเทียบข้ามการทดสอบโดยตรงไม่ได้
เลือกชุดข้อมูลเพื่อดูทุกตัวชี้วัดของแต่ละโมเดล แถวเรียงตามอันดับทางการหรือตัวชี้วัดที่เลือก ตัวหนาแสดงค่าที่ดีที่สุดที่เปรียบเทียบกันได้ในแต่ละคอลัมน์ รวมถึงค่าที่เสมอกัน วิธีประเมินที่ต่างกันจะแยกจัดอันดับ คะแนนที่ไม่มีจะแสดงเป็น "-"
ติดตั้งได้ 3 / แถวต้นฉบับ 3
ค่าตัวเลขมาจากแหล่งข้อมูลสาธารณะที่เชื่อมโยงไว้ ป้ายกำกับแถวระบุชุดทดสอบหรือเช็กพอยต์ ส่วนคะแนนที่ไม่ได้รายงานจะแสดงด้วยเครื่องหมาย "-"
| อันดับตามตัวชี้วัด | รุ่น | COnPOff(F) ↑ | RPA ↑ |
|---|---|---|---|
| 1 | STARS (ours)น้ำหนักสาธารณะ · โค้ดอนุมาน | 71.0 | 86.7 |
| 2 | ROSVOTน้ำหนักสาธารณะ · โค้ดอนุมาน | 70.2 | 83.8 |
| 3 | VOCANOน้ำหนักสาธารณะ · โค้ดอนุมาน | 50.2 | 76.6 |
เลือกชุดข้อมูลเพื่อดูทุกตัวชี้วัดของแต่ละโมเดล แถวเรียงตามอันดับทางการหรือตัวชี้วัดที่เลือก ตัวหนาแสดงค่าที่ดีที่สุดที่เปรียบเทียบกันได้ในแต่ละคอลัมน์ รวมถึงค่าที่เสมอกัน วิธีประเมินที่ต่างกันจะแยกจัดอันดับ คะแนนที่ไม่มีจะแสดงเป็น "-"
ติดตั้งได้ 2 / แถวต้นฉบับ 6
ยังไม่ได้ยืนยันแพ็กเกจอนุมานสาธารณะที่ครบถ้วนสำหรับการทดลองเหล่านี้ น้ำหนักอื่นที่ชื่อโมเดลเดียวกันใช้แทนไม่ได้
w/o CTC · w/o VQ · w/o MOE · Conv
ค่าตัวเลขมาจากแหล่งข้อมูลสาธารณะที่เชื่อมโยงไว้ ป้ายกำกับแถวระบุชุดทดสอบหรือเช็กพอยต์ ส่วนคะแนนที่ไม่ได้รายงานจะแสดงด้วยเครื่องหมาย "-"
| อันดับตามตัวชี้วัด | รุ่น | BER ↓ | IOU ↑ | COnPOff(F) ↑ | RPA ↑ | T-F1 ↑ | T-ACC ↑ | S-ACC ↑ |
|---|---|---|---|---|---|---|---|---|
| 1 | STARSน้ำหนักสาธารณะ · โค้ดอนุมาน | 18.6 | 80.9 | 71.0 | 86.7 | 79.9 | 91.5 | 68.0 |
| 2 | Bilingualน้ำหนักสาธารณะ · โค้ดอนุมาน | 19.4 | 75.6 | 68.1 | 86.2 | 76.8 | 91.4 | 70.4 |
โปรดระบุชื่อเครื่องมือ ขั้นตอน และปัญหาที่พบในข้อเสนอแนะ ภาพหน้าจอช่วยให้ตรวจสอบได้ง่ายขึ้น