เปียโน TransKun V2 ส.ค. สามารถช่วยงานอะไรได้บ้าง

MIDI / การถอดความ; Piano MIDI จาก V2 แยกต่างหาก checkpoint สิงหาคม ซึ่งมีประโยชน์สําหรับการเปรียบเทียบกับเส้นทาง V2 เริ่มต้น; เปรียบเทียบแบบเคียงข้างกับ V2 เริ่มต้นเพื่อตัดสินว่า checkpoint เสริมเหมาะกับการบันทึกมากกว่าหรือไม่; วัสดุ piano เดี่ยวหรือแป้นพิมพ์เดี่ยว TransKun V2 ส.ค. เป็น checkpoint ที่เสริมข้อมูลสาธารณะพร้อมเมตริกสรุป MIREX ที่แข็งแกร่งกว่า; เปรียบเทียบร่าง V2 และ V2 Aug MIDI ใน piano เดียวกัน; ลองใช้ตัวแปร TransKun ที่นําโดยสรุปของ MIREX เพื่อการสรุปที่กว้างขึ้น

MIDI / การถอดความภาระงาน GPU

เปียโน TransKun V2 ส.ค.

Q: เปียโน TransKun V2 ส.ค. เหมาะกับใคร?

MIDI / การถอดความ Piano MIDI จาก V2 แยกต่างหาก checkpoint สิงหาคม ซึ่งมีประโยชน์สําหรับการเปรียบเทียบกับเส้นทาง V2 เริ่มต้น

Q: เอนทิตีแบบจําลองและคําหลักใดที่เชื่อมต่อกับ เปียโน TransKun V2 ส.ค.

TransKun V2 Aug, Yujia-Yan/TransKun, TransKun V2 Aug checkpoint, transkun PyPI, TransKun ISMIR 2024, MIREX 2024 permanent results, TransKun V2, Aria-AMT

เปรียบเทียบแบบเคียงข้างกับ V2 เริ่มต้นเพื่อตัดสินว่า checkpoint เสริมเหมาะกับการบันทึกมากกว่าหรือไม่

Piano MIDI จาก V2 แยกต่างหาก checkpoint สิงหาคม ซึ่งมีประโยชน์สําหรับการเปรียบเทียบกับเส้นทาง V2 เริ่มต้น

2 เครดิต/การใช้งานอินพุตไฟล์เสียงสูงสุด 50 MBประมาณ 20-60 วินาที

อินพุต

วัสดุ piano เดี่ยวหรือแป้นพิมพ์เดี่ยว TransKun V2 ส.ค. เป็น checkpoint ที่เสริมข้อมูลสาธารณะพร้อมเมตริกสรุป MIREX ที่แข็งแกร่งกว่า

รูปแบบเสียง

mp3wavflacoggm4aaac

เอาท์พุต

กรณีการใช้งาน

โมเดล พารามิเตอร์ และแหล่งที่มา

TransKun V2 Aug เป็นเส้นทางการถอดความ piano ท้องถิ่นแยกต่างหากโดยใช้ checkpoint เสริมข้อมูลอย่างเป็นทางการ ส่งไฟล์ piano เพื่อสร้าง MIDI โดยไม่ต้องแทนที่เครื่องมือ V2 เริ่มต้น

TransKun V2 AugYujia-Yan/TransKunTransKun V2 Aug checkpointtranskun PyPITransKun ISMIR 2024MIREX 2024 permanent resultsTransKun V2Aria-AMTEleutherAI/aria-amtAria-MIDI HF datasetMIREX 2024 summaryhFT-Transformer

TransKun V2 Aug

TransKun V2 Aug เป็นเส้นทาง checkpoint การเพิ่มข้อมูลในเครื่องแยกต่างหากโดยใช้ checkpointTransformerAug.zip

Yujia-Yan/TransKun TransKun V2 Aug checkpoint transkun PyPI TransKun ISMIR 2024 MIREX 2024 permanent results

สถาปัตยกรรม: TransKun V2 Aug ใช้ Transformer และตระกูล neural semi-CRF interval decoding ที่ไม่มีลําดับชั้นเหมือนกับ TransKun V2
รันไทม์: ใช้จุดตรวจสอบ MSimplerAug/checkpoint.pt plus model.conf ที่แยกมาจาก checkpointTransformerAug.zip ไม่ใช่รีซอร์ส V2 2.0.pt ที่แพ็กเกจ
ผลลัพธ์: single-track piano MIDI โดยผลสรุป MIREX 2024 ให้คะแนน V2 Aug ดีกว่า ขณะที่แถว Maestro note+offset+velocity และ pedal onset สูงกว่าเล็กน้อยสำหรับ V2

การเปรียบเทียบรุ่น

รุ่น

บทบาท

ทําไมถึงใช้

ผลกระทบต่อเอาต์พุต

รุ่นTransKun V2 Aug

Yujia-Yan/TransKun TransKun V2 Aug checkpoint transkun PyPI TransKun ISMIR 2024 MIREX 2024 permanent results

บทบาทเส้นทาง TransKun ที่ผ่านการฝึกอบรมเสริม

ทําไมถึงใช้ดีที่สุดเมื่อคุณต้องการให้ MIREX สรุป TransKun พื้นฐานเป็นของตัวเองแทนที่จะแทนที่ V2 อย่างเงียบๆ

ผลกระทบต่อเอาต์พุตpiano MIDI แทร็กเดี่ยวจาก V2 ส.ค. checkpoint

รุ่นTransKun V2

Yujia-Yan/TransKun MIREX 2024 permanent results

บทบาทpiano AMT ที่รวดเร็วและมีความแม่นยําสูง

ทําไมถึงใช้แถว MIREX สาธารณะทําให้เป็นเส้นทาง piano ที่มีคะแนนสนับสนุนชัดเจนที่สุดในแคตตาล็อกนี้

ผลกระทบต่อเอาต์พุตเดี่ยว piano MIDI

รุ่นAria-AMT

EleutherAI/aria-amt Aria-MIDI HF dataset

บทบาทเส้นทาง Seq-to-seq piano AMT

ทําไมถึงใช้กระดาษ Aria-AMT ตารางที่ 1 แสดงการเปรียบเทียบ MAESTRO/MAPS ไม่ใช่แถวกระดานผู้นํา MIREX

ผลกระทบต่อเอาต์พุตเดี่ยว piano MIDI

กระดานผู้นําสาธารณะ: สรุป MIREX 2024 piano กระดานผู้นําการถอดความ / MIREX 2024 Maestro piano แถว / แถวเปียโน MAPS ของ MIREX 2024 / แถวเปียโน SMD ของ MIREX 2024

ขอบเขตโอเพนซอร์สที่ติดตั้งในเครื่องได้: ตารางเหล่านี้รวมเฉพาะแถวที่ตรวจสอบแล้วว่ามีน้ำหนักหรือการตั้งค่าให้ดาวน์โหลดและมีวิธีติดตั้งในเครื่อง ป้าย SOTA และดีที่สุดอ้างอิงเฉพาะแถวที่ตรวจสอบและแสดงอยู่ ไม่รวมระบบโฮสต์ ระบบ API เท่านั้น หรือระบบเชิงพาณิชย์ และไม่ใช่อันดับรวมสากล

สรุป MIREX 2024 piano กระดานผู้นําการถอดความ

MIREX 2024 permanent results

แถวสรุปของ MIREX เปรียบเทียบการเริ่มต้นของโน้ตเฉลี่ย F1 ในชุดข้อมูลสามชุดและโน้ตแบบองค์รวม F1 ใน Maestro และ SMD

อันดับ	รุ่น	Holistic note F1 (%)	เมตริกโดยละเอียด
MIREX 2024 summary	TransKun V2 AugTelkNetMIREX 2024 permanent results	90.81SOTA	Summary onset F1 (%)96.48ดีที่สุด
MIREX 2024 summary	TransKun V2MIREX 2024 permanent results	87.64	Summary onset F1 (%)94.90
MIREX 2024 summary	hFT-TransformerMIREX 2024 permanent results	83.59	Summary onset F1 (%)94.16

MIREX 2024 Maestro piano แถว

MIREX 2024 permanent results

แถวการถอดเสียง piano สาธารณะบน Maestro ค่าจะแสดงเป็นเปอร์เซ็นต์เพื่อความง่ายในการอ่าน

อันดับ	รุ่น	หมายเหตุ + ความเร็ว F1 %	เมตริกโดยละเอียด
MIREX 2024 published row	TransKun V2MIREX 2024 permanent results	92.96SOTA	F1 การเปิดใช้งาน (%)95.30ดีที่สุดหมายเหตุ เริ่ม F1 %98.32หมายเหตุ ชดเชย F1 %93.49ดีที่สุดF1 การเปิดใช้งานแป้นเหยียบ (%)95.41ดีที่สุดเหยียบคันเร่ง F1 %86.42ดีที่สุดF1 จุดเริ่มต้น+สิ้นสุดของแป้นเหยียบ (%)83.77ดีที่สุด
MIREX 2024 published row	TransKun V2 AugTelkNetMIREX 2024 permanent results	92.64	F1 การเปิดใช้งาน (%)95.05หมายเหตุ เริ่ม F1 %98.40ดีที่สุดหมายเหตุ ชดเชย F1 %93.14F1 การเปิดใช้งานแป้นเหยียบ (%)94.54เหยียบคันเร่ง F1 %84.53F1 จุดเริ่มต้น+สิ้นสุดของแป้นเหยียบ (%)81.02
MIREX 2024 published row	hFT-TransformerMIREX 2024 permanent results	89.48	F1 การเปิดใช้งาน (%)93.07หมายเหตุ เริ่ม F1 %97.45หมายเหตุ ชดเชย F1 %90.45

แถวเปียโน MAPS ของ MIREX 2024

MIREX 2024 permanent results

แถวสาธารณะทั้งหมดของ MAPS จากผลการถอดโน้ตแบบหลายเสียงของ MIREX 2024

อันดับ	รุ่น	หมายเหตุ เริ่ม F1 %	เมตริกโดยละเอียด
MIREX 2024 published row	TransKun V2 AugTelkNetMIREX 2024 permanent results	92.19SOTA	F1 การเปิดใช้งาน (%)88.43ดีที่สุดหมายเหตุ ชดเชย F1 %69.75ดีที่สุดหมายเหตุ + ความเร็ว F1 %54.95ดีที่สุดF1 การเปิดใช้งานแป้นเหยียบ (%)85.83ดีที่สุดเหยียบคันเร่ง F1 %73.43ดีที่สุดF1 จุดเริ่มต้น+สิ้นสุดของแป้นเหยียบ (%)55.32ดีที่สุด
MIREX 2024 published row	TransKun V2MIREX 2024 permanent results	88.49	F1 การเปิดใช้งาน (%)85.35หมายเหตุ ชดเชย F1 %64.61หมายเหตุ + ความเร็ว F1 %44.46F1 การเปิดใช้งานแป้นเหยียบ (%)84.49เหยียบคันเร่ง F1 %67.32F1 จุดเริ่มต้น+สิ้นสุดของแป้นเหยียบ (%)50.88
MIREX 2024 published row	hFT-TransformerMIREX 2024 permanent results	87.89	F1 การเปิดใช้งาน (%)80.19หมายเหตุ ชดเชย F1 %57.19หมายเหตุ + ความเร็ว F1 %36.12

แถวเปียโน SMD ของ MIREX 2024

MIREX 2024 permanent results

แถวสาธารณะทั้งหมดของ SMD จากผลการถอดโน้ตแบบหลายเสียงของ MIREX 2024

อันดับ	รุ่น	หมายเหตุ เริ่ม F1 %	เมตริกโดยละเอียด
MIREX 2024 published row	TransKun V2 AugTelkNetMIREX 2024 permanent results	98.84SOTA	F1 การเปิดใช้งาน (%)94.48ดีที่สุดหมายเหตุ ชดเชย F1 %92.05ดีที่สุดหมายเหตุ + ความเร็ว F1 %88.97ดีที่สุดF1 การเปิดใช้งานแป้นเหยียบ (%)94.47ดีที่สุดเหยียบคันเร่ง F1 %83.83F1 จุดเริ่มต้น+สิ้นสุดของแป้นเหยียบ (%)78.37ดีที่สุด
MIREX 2024 published row	TransKun V2MIREX 2024 permanent results	97.90	F1 การเปิดใช้งาน (%)93.40หมายเหตุ ชดเชย F1 %89.90หมายเหตุ + ความเร็ว F1 %82.32F1 การเปิดใช้งานแป้นเหยียบ (%)94.20เหยียบคันเร่ง F1 %83.88ดีที่สุดF1 จุดเริ่มต้น+สิ้นสุดของแป้นเหยียบ (%)77.30
MIREX 2024 published row	hFT-TransformerMIREX 2024 permanent results	97.13	F1 การเปิดใช้งาน (%)91.15หมายเหตุ ชดเชย F1 %86.92หมายเหตุ + ความเร็ว F1 %77.69

เครื่องมือที่จับคู่

ควรเลือก V2 หรือ V2 Aug เมื่อใด?

สำหรับเสียงบันทึกจริงที่หลากหลายและโทนเปียโนต่างกัน ให้เริ่มจาก TransKun V2 Aug สำหรับเปียโนสะอาดที่เน้นการปล่อยโน้ต น้ำหนัก และแป้นเหยียบ V2 ปกติอาจดีกว่า ใช้ V2 No Pedal Ext เมื่ออยากให้ความยาวโน้ตตามการปล่อยคีย์จริงแทนการยืดด้วย sustain ไม่มีรุ่นใดชนะทุกตัวชี้วัดเสมอ แต่ทั้งคู่ยังเป็นตัวเลือกสาธารณะสำหรับเปียโนเดี่ยวที่สมบูรณ์ เป็นผู้ใหญ่ และมีหลักฐานรองรับมากที่สุดกลุ่มหนึ่ง

เปิด เปียโน TransKun V2

กระดาษและบันทึกเกณฑ์มาตรฐาน

Scoring Time Intervals Using Non-Hierarchical Transformer for Automatic Piano Transcription

ISMIR - 2024

เอกสาร TransKun V2 รายงานสถาปัตยกรรมการให้คะแนนช่วงเวลาของหม้อแปลงและผลลัพธ์ F1 ที่สูงขึ้นในงานย่อยของ Maestro

arXiv:2404.09466

Skipping the Frame-Level: Event-Based Piano Transcription with Neural Semi-CRFs

NeurIPS - 2021

กรอบกระดาษ Semi-CRF ปี 2021 piano การถอดความเป็นการคาดการณ์ช่วงเวลา/เหตุการณ์แทนการตรวจจับระดับเฟรม

OpenReview

เป็นทางการ / ที่เก็บ

Yujia-Yan/TransKun TransKun V2 Aug checkpoint transkun PyPI

เอกสาร / หมายเหตุทางเทคนิค

TransKun ISMIR 2024 MIREX 2024 permanent results

คู่มือพารามิเตอร์

Solo piano: รุ่นเหล่านี้มีไว้สําหรับการบันทึก piano หรือคีย์บอร์ดที่สะอาด

กรณีการใช้งาน

เปรียบเทียบร่าง V2 และ V2 Aug MIDI ใน piano เดียวกัน
ลองใช้ตัวแปร TransKun ที่นําโดยสรุปของ MIREX เพื่อการสรุปที่กว้างขึ้น
เก็บเอาต์พุต V2 ที่ไวต่อแป้นเหยียบ/ความเร็วไว้เป็นตัวเลือกแยกต่างหาก

เวิร์กโฟลว์

1อัปโหลดแหล่งแป้นพิมพ์ solo piano หรือแหล่งเดียว
2เรียกใช้ TransKun อย่างเป็นทางการ V2 ส.ค. checkpoint ในพื้นที่
3เปรียบเทียบเอาต์พุตกับ TransKun V2 หากรายละเอียดของแป้นเหยียบหรือความเร็วมีความสําคัญ

รายการตรวจสอบก่อนเที่ยวบิน

ดีที่สุดสําหรับ solo piano ไม่ได้ออกแบบมาสําหรับการผสมแบบฟูลแบนด์
V2 ส.ค. เป็นผู้นําเมตริกสรุปของ MIREX ในขณะที่ V2 สูงกว่าในแถวแป้นเหยียบ/ความเร็วของ Maestro บางแถว
ทํางานจากโค้ด TransKun โอเพนซอร์สในเครื่องและ checkpoint สาธารณะที่ดาวน์โหลด ไม่ใช่ API ภายนอก

คู่มือการใช้งานที่เกี่ยวข้อง

หน้าเหล่านี้ตั้งชื่อตามงานที่ผู้ใช้ค้นหา และเชื่อมไปยังเครื่องมือ ขอบเขตโมเดล แหล่งที่มา และ FAQ

audio to MIDI เครื่องมือออนไลน์และคู่มือโมเดล

จําเป็นต้องเข้าสู่ระบบเพื่อใช้เครื่องมือนี้

ลงชื่อเข้าใช้หรือสร้างบัญชีเพื่ออัปโหลดไฟล์ ส่งงาน และตรวจทานผลลัพธ์ในพื้นที่ทํางานของคุณ

ข้อมูลเครื่องมือท่องเว็บนั้นฟรีเสมอ - ไม่จําเป็นต้องมีบัญชี

โมเดล พารามิเตอร์ และแหล่งที่มา

อันดับ

รุ่น

Holistic note F1 (%)

เมตริกโดยละเอียด

MIREX 2024 summary

TransKun V2 AugTelkNetMIREX 2024 permanent results

90.81SOTA

Summary onset F1 (%)96.48ดีที่สุด

MIREX 2024 summary

TransKun V2MIREX 2024 permanent results

87.64

Summary onset F1 (%)94.90

MIREX 2024 summary

hFT-TransformerMIREX 2024 permanent results

83.59

Summary onset F1 (%)94.16

อันดับ

รุ่น

หมายเหตุ + ความเร็ว F1 %

เมตริกโดยละเอียด

MIREX 2024 published row

TransKun V2MIREX 2024 permanent results

92.96SOTA

F1 การเปิดใช้งาน (%)95.30ดีที่สุดหมายเหตุ เริ่ม F1 %98.32หมายเหตุ ชดเชย F1 %93.49ดีที่สุดF1 การเปิดใช้งานแป้นเหยียบ (%)95.41ดีที่สุดเหยียบคันเร่ง F1 %86.42ดีที่สุดF1 จุดเริ่มต้น+สิ้นสุดของแป้นเหยียบ (%)83.77ดีที่สุด

MIREX 2024 published row

TransKun V2 AugTelkNetMIREX 2024 permanent results

92.64

F1 การเปิดใช้งาน (%)95.05หมายเหตุ เริ่ม F1 %98.40ดีที่สุดหมายเหตุ ชดเชย F1 %93.14F1 การเปิดใช้งานแป้นเหยียบ (%)94.54เหยียบคันเร่ง F1 %84.53F1 จุดเริ่มต้น+สิ้นสุดของแป้นเหยียบ (%)81.02

MIREX 2024 published row

hFT-TransformerMIREX 2024 permanent results

89.48

F1 การเปิดใช้งาน (%)93.07หมายเหตุ เริ่ม F1 %97.45หมายเหตุ ชดเชย F1 %90.45

อันดับ

รุ่น

หมายเหตุ เริ่ม F1 %

เมตริกโดยละเอียด

MIREX 2024 published row

TransKun V2 AugTelkNetMIREX 2024 permanent results

92.19SOTA

F1 การเปิดใช้งาน (%)88.43ดีที่สุดหมายเหตุ ชดเชย F1 %69.75ดีที่สุดหมายเหตุ + ความเร็ว F1 %54.95ดีที่สุดF1 การเปิดใช้งานแป้นเหยียบ (%)85.83ดีที่สุดเหยียบคันเร่ง F1 %73.43ดีที่สุดF1 จุดเริ่มต้น+สิ้นสุดของแป้นเหยียบ (%)55.32ดีที่สุด

MIREX 2024 published row

TransKun V2MIREX 2024 permanent results

88.49

F1 การเปิดใช้งาน (%)85.35หมายเหตุ ชดเชย F1 %64.61หมายเหตุ + ความเร็ว F1 %44.46F1 การเปิดใช้งานแป้นเหยียบ (%)84.49เหยียบคันเร่ง F1 %67.32F1 จุดเริ่มต้น+สิ้นสุดของแป้นเหยียบ (%)50.88

MIREX 2024 published row

hFT-TransformerMIREX 2024 permanent results

87.89

F1 การเปิดใช้งาน (%)80.19หมายเหตุ ชดเชย F1 %57.19หมายเหตุ + ความเร็ว F1 %36.12

อันดับ

รุ่น

หมายเหตุ เริ่ม F1 %

เมตริกโดยละเอียด

MIREX 2024 published row

TransKun V2 AugTelkNetMIREX 2024 permanent results

98.84SOTA

F1 การเปิดใช้งาน (%)94.48ดีที่สุดหมายเหตุ ชดเชย F1 %92.05ดีที่สุดหมายเหตุ + ความเร็ว F1 %88.97ดีที่สุดF1 การเปิดใช้งานแป้นเหยียบ (%)94.47ดีที่สุดเหยียบคันเร่ง F1 %83.83F1 จุดเริ่มต้น+สิ้นสุดของแป้นเหยียบ (%)78.37ดีที่สุด

MIREX 2024 published row

TransKun V2MIREX 2024 permanent results

97.90

F1 การเปิดใช้งาน (%)93.40หมายเหตุ ชดเชย F1 %89.90หมายเหตุ + ความเร็ว F1 %82.32F1 การเปิดใช้งานแป้นเหยียบ (%)94.20เหยียบคันเร่ง F1 %83.88ดีที่สุดF1 จุดเริ่มต้น+สิ้นสุดของแป้นเหยียบ (%)77.30

MIREX 2024 published row

hFT-TransformerMIREX 2024 permanent results

97.13

F1 การเปิดใช้งาน (%)91.15หมายเหตุ ชดเชย F1 %86.92หมายเหตุ + ความเร็ว F1 %77.69

กรณีการใช้งาน

เปรียบเทียบร่าง V2 และ V2 Aug MIDI ใน piano เดียวกัน

ลองใช้ตัวแปร TransKun ที่นําโดยสรุปของ MIREX เพื่อการสรุปที่กว้างขึ้น

เก็บเอาต์พุต V2 ที่ไวต่อแป้นเหยียบ/ความเร็วไว้เป็นตัวเลือกแยกต่างหาก

เวิร์กโฟลว์

1อัปโหลดแหล่งแป้นพิมพ์ solo piano หรือแหล่งเดียว

2เรียกใช้ TransKun อย่างเป็นทางการ V2 ส.ค. checkpoint ในพื้นที่

3เปรียบเทียบเอาต์พุตกับ TransKun V2 หากรายละเอียดของแป้นเหยียบหรือความเร็วมีความสําคัญ

รายการตรวจสอบก่อนเที่ยวบิน

ดีที่สุดสําหรับ solo piano ไม่ได้ออกแบบมาสําหรับการผสมแบบฟูลแบนด์

V2 ส.ค. เป็นผู้นําเมตริกสรุปของ MIREX ในขณะที่ V2 สูงกว่าในแถวแป้นเหยียบ/ความเร็วของ Maestro บางแถว

ทํางานจากโค้ด TransKun โอเพนซอร์สในเครื่องและ checkpoint สาธารณะที่ดาวน์โหลด ไม่ใช่ API ภายนอก