แยก/ลบสเต็มแบบกำหนดเอง (RoFormer) คืออะไร?

ส่งออกสเต็มเป้าหมายหรือมิกซ์ที่ลบเป้าหมายนั้นแล้ว; เหมาะสำหรับฝึกซ้อม ดนตรีประกอบ รีมิกซ์ แซมปลิง และทำความสะอาดเฉพาะส่วน

แยก/ลบสเต็มแบบกำหนดเอง (RoFormer) เหมาะกับใคร?

การแยกและแยก stem ส่งออกสเต็มเป้าหมายหรือมิกซ์ที่ลบเป้าหมายนั้นแล้ว; เหมาะสำหรับฝึกซ้อม ดนตรีประกอบ รีมิกซ์ แซมปลิง และทำความสะอาดเฉพาะส่วน

แยก/ลบสเต็มแบบกำหนดเอง (RoFormer) สามารถช่วยงานอะไรได้บ้าง

การแยกและแยก stem; ส่งออกสเต็มเป้าหมายหรือมิกซ์ที่ลบเป้าหมายนั้นแล้ว; เหมาะสำหรับฝึกซ้อม ดนตรีประกอบ รีมิกซ์ แซมปลิง และทำความสะอาดเฉพาะส่วน; เลือกเสียงร้อง กลอง เบส กีตาร์ เปียโน หรืออื่น ๆ จากเสียงหรือวิดีโอเพลง; แยกเฉพาะเครื่องดนตรีที่เลือก; ลบเป้าหมายและคงมิกซ์ส่วนที่เหลือ

การแยกและแยก stemภาระงาน GPU

แยก/ลบสเต็มแบบกำหนดเอง

Q: เอนทิตีแบบจําลองและคําหลักใดที่เชื่อมต่อกับ แยก/ลบสเต็มแบบกำหนดเอง (RoFormer)

BS-RoFormer SW Fixed 6-stem, MVSep BS Roformer SW, MVSep Multisong leaderboard, BS-Rofo-SW-Fixed HF weights, BS-Rofo-SW-Fixed mirror, BS-RoFormer implementation, bs-roformer-infer registry, python-audio-separator

เหมาะสำหรับฝึกซ้อม ดนตรีประกอบ รีมิกซ์ แซมปลิง และทำความสะอาดเฉพาะส่วน

ส่งออกสเต็มเป้าหมายหรือมิกซ์ที่ลบเป้าหมายนั้นแล้ว

6 เครดิต/การใช้งานFile อินพุตสูงสุด 100 MBประมาณ 120-900 วินาที

อินพุต

เลือกเสียงร้อง กลอง เบส กีตาร์ เปียโน หรืออื่น ๆ จากเสียงหรือวิดีโอเพลง

รูปแบบที่รองรับ

mp3wavflacoggm4aaacaifaiffmp4movmkv

เอาท์พุต

ส่งออกสเต็มเป้าหมายหรือมิกซ์ที่ลบเป้าหมายนั้นแล้ว

กรณีการใช้งาน

โมเดล พารามิเตอร์ และแหล่งที่มา

การแยกหกก้านแยกส่วนผสมออกเป็น six WAV stems: vocals, drums, bass, guitar, piano และอื่นๆ

BS-RoFormer SW Fixed 6-stemMVSep BS Roformer SWMVSep Multisong leaderboardBS-Rofo-SW-Fixed HF weightsBS-Rofo-SW-Fixed mirrorBS-RoFormer implementationbs-roformer-infer registrypython-audio-separatorBS-RoFormerHT Demucsfacebookresearch/demucsHT Demucs paper

BS-RoFormer SW Fixed 6-stem

BS-RoFormer SW Fixed ใช้ BS-Rofo-SW-Fixed.ckpt บวก BS-Rofo-SW-Fixed.yaml เพื่อแบ่งมิกซ์เต็มออกเป็น six WAV stems

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

เอาต์พุตเสียง: vocals, drums, bass, guitar, piano และ other WAV stems
มีประโยชน์สําหรับการทบทวนการเรียบเรียง สื่อการฝึกหัด การเตรียมรีมิกซ์ และเปลี่ยนเพลงผสมเป็นไฟล์ stem แยกต่างหาก

การเปรียบเทียบรุ่น

รุ่น

บทบาท

ทําไมถึงใช้

ผลกระทบต่อเอาต์พุต

รุ่นBS-RoFormer SW Fixed 6-stem

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

บทบาทBS-RoFormer SW ตัวแยกเสียง six-stem คงที่

ทําไมถึงใช้เลือกเนื่องจากเอาต์พุต BS-RoFormer SW Fixed 6-stem vocals, drums, bass, guitar, piano และอื่นๆ พร้อมการอ้างอิง MVSep และ BS-RoFormer สาธารณะ

ผลกระทบต่อเอาต์พุตหก WAV stems

รุ่นHT Demucs

facebookresearch/demucs HT Demucs paper

บทบาทพื้นฐานการแยก / สํารอง

ทําไมถึงใช้HT Demucs เป็นข้อมูลอ้างอิงโอเพ่นซอร์สที่แข็งแกร่ง เครื่องมือนี้ใช้ BS-RoFormer SW Fixed 6-stem เนื่องจากกําหนดเป้าหมายโดยตรงไปยัง stems ที่แสดงหกรายการ

ผลกระทบต่อเอาต์พุตบริบทหรือ stems สํารอง

แผนภูมิเกณฑ์มาตรฐาน: MVSep BS-RoFormer SW ข้อมูล six-stem คงที่ / แถวการตรวจสอบความถูกต้อง stem MVSep piano / แถวการตรวจสอบความถูกต้อง MVSep guitar stem

ขอบเขตโอเพนซอร์สที่ติดตั้งในเครื่องได้: ตารางเหล่านี้รวมเฉพาะแถวที่ตรวจสอบแล้วว่ามีน้ำหนักหรือการตั้งค่าให้ดาวน์โหลดและมีวิธีติดตั้งในเครื่อง ป้าย SOTA และดีที่สุดอ้างอิงเฉพาะแถวที่ตรวจสอบและแสดงอยู่ ไม่รวมระบบโฮสต์ ระบบ API เท่านั้น หรือระบบเชิงพาณิชย์ และไม่ใช่อันดับรวมสากล

MVSep BS-RoFormer SW ข้อมูล six-stem คงที่

MVSep Multisong entry 8374

สิ่งนี้ทําให้แถว BS-RoFormer SW Fixed 6-stem ที่ปรับใช้ได้อยู่ข้างพื้นฐาน htdemucs_6s สาธารณะ แถว Test, RA, Logic และ UVR ใกล้เคียงเป็นตัวแปรหรือการทดสอบการทํางาน ไม่ใช่รุ่นเครื่องมือ

กระดาษและบันทึกเกณฑ์มาตรฐาน	รุ่น	ร้องนำ SDR (dB)	เมตริกโดยละเอียด
MVSep entry 8374	BS-RoFormer SW Fixed 6-stemTelkNetMVSep entry 8374 เครื่องมือนี้ใช้ BS-RoFormer SW Fixed สําหรับ vocals, drums, bass, guitar, piano และอื่นๆ	11.3019	เครื่องมือ SDR (dB)17.5091เบส SDR (dB)14.6235กลอง SDR (dB)14.1129กีตาร์ SDR (dB)9.0500เปียโน SDR (dB)7.8300SDR อื่น ๆ (dB)8.7169

แถวการตรวจสอบความถูกต้อง stem MVSep piano

MVSep Piano scores

MVSep เผยแพร่แถวการตรวจสอบความถูกต้อง piano stem แยกต่างหากสําหรับตัวคั่นที่รองรับ six-stem แถวเหล่านี้อธิบายว่าเหตุใดจึงใช้โมเดล BS-RoFormer SW Fixed ปัจจุบันสําหรับเอาต์พุต piano

อันดับ	รุ่น	เปียโน SDR (dB)	เมตริกโดยละเอียด
MVSep entry 9578	BS-RoFormer SW FixedTelkNetMVSep entry 9578	7.8031SOTA	SDR อื่น ๆ (dB)19.5824ดีที่สุด
MVSep entry 7396	Ensemble (SCNet + Mel)MVSep entry 7396	6.2054	SDR อื่น ๆ (dB)18.4851
MVSep entry 7395	SCNet Large (2024.09)MVSep entry 7395	5.8912	SDR อื่น ๆ (dB)18.1698
MVSep entry 7394	MelRoformer (viperx)MVSep entry 7394	5.7118	SDR อื่น ๆ (dB)17.9917
MVSep entry 7392	mdx23c (2024.09)MVSep entry 7392	5.5996	SDR อื่น ๆ (dB)17.8796
MVSep entry 7390	mdx23c (2023.08)MVSep entry 7390	4.7969	SDR อื่น ๆ (dB)17.0766

แถวการตรวจสอบความถูกต้อง MVSep guitar stem

MVSep Guitar scores

MVSep เผยแพร่แถวการตรวจสอบความถูกต้อง guitar stem แยกต่างหากสําหรับตัวคั่นที่รองรับ six-stem แถวเหล่านี้แสดงบริบทของแบบจําลองที่ปรับใช้ได้ซึ่งขาดหายไปจากกระดานผู้นํา six-stem เดียว

อันดับ	รุ่น	กีตาร์ SDR (dB)	เมตริกโดยละเอียด
MVSep entry 9245	BS-RoFormer SW FixedTelkNetMVSep entry 9245	9.0120SOTA	SDR อื่น ๆ (dB)15.9828ดีที่สุด
MVSep entry 7149	Ensemble (BSRoformer + MelRoformer)MVSep entry 7149	7.5112	SDR อื่น ๆ (dB)14.4820
MVSep entry 6741	Ensemble (mdx23 + MelRoformer)MVSep entry 6741	7.1835	SDR อื่น ๆ (dB)14.1542
MVSep entry 6776	BSRoformer (viperx)MVSep entry 6776	7.1266	SDR อื่น ๆ (dB)13.9775
MVSep entry 6720	MelRoformer (2024.06)MVSep entry 6720	7.0211	SDR อื่น ๆ (dB)13.9919
MVSep entry 6740	mdx23c (2024.06)MVSep entry 6740	6.3422	SDR อื่น ๆ (dB)13.3130

กระดาษและบันทึกเกณฑ์มาตรฐาน

Music Source Separation with Band-Split RoPE Transformer

SDX23 music separation track - 2023

BS-RoFormer ใช้คุณสมบัติสเปกโตรแกรมแบบแยกแถบบวกกับ RoPE Transformers; ระบบ SDX23 อยู่ในอันดับแรกในแทร็กการแยกแหล่งเพลง และเวอร์ชันที่เล็กกว่ารายงาน SDR เฉลี่ย 9.80 dB ใน MUSDB18HQ

arXiv:2309.02612

Hybrid Transformers for Music Source Separation

ICASSP - 2023

HT Demucs แทนที่เลเยอร์ Demucs หลักด้วย cross-domain Transformer attention และรายงาน 9.20 dB SDR พร้อมข้อมูลเพิ่มเติมและการปรับแต่งอย่างละเอียด

arXiv:2211.08553

เป็นทางการ / ที่เก็บ

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator

เอกสาร / หมายเหตุทางเทคนิค

BS-RoFormer

คู่มือพารามิเตอร์

รุ่น: BS-RoFormer SW Fixed 6-stem (BS-Rofo-SW-Fixed.ckpt)
เอาต์พุตเสียง: vocals, drums, bass, guitar, piano และ other WAV stems
ตัวเลือกโมเดล: การอ้างอิงอัลกอริทึม MVSep สาธารณะแสดงรายการนี้เป็น sep_type=63 TelkNet เรียกใช้น้ําหนัก SW BS-RoFormer ในเครื่อง ไม่ใช่งาน MVSep API ภายนอก ไม่มีการควบคุม add_opt ดังนั้นเครื่องมือจึงใช้การกําหนดค่าคุณภาพเริ่มต้นอย่างเป็นทางการ

กรณีการใช้งาน

แยกเฉพาะเครื่องดนตรีที่เลือก
ลบเป้าหมายและคงมิกซ์ส่วนที่เหลือ
เตรียมสื่อสำหรับฝึกซ้อม รีมิกซ์ หรือแซมปลิง

เวิร์กโฟลว์

1อัปโหลดเพลงและเลือกสเต็ม
2เลือกแยกหรือลบ โดยเสียงร้องใช้เส้นทางเฉพาะ
3ฟัง ดาวน์โหลด หรือรวมผลกลับในวิดีโอ

รายการตรวจสอบก่อนเที่ยวบิน

เสียงร้องใช้เส้นทางเฉพาะ
เครื่องดนตรีที่ซ้อนกันมากอาจยังมีเสียงรั่ว
ทดสอบคลิปตัวแทนก่อนส่งงานจำนวนมาก

หลักฐานแบบจําลองในการวิ่งครั้งนี้

โมเดล พารามิเตอร์ และแหล่งที่มา

การแยกหกก้านแยกส่วนผสมออกเป็น six WAV stems: vocals, drums, bass, guitar, piano และอื่นๆ

BS-RoFormer SW Fixed 6-stem

รุ่น

BS-Rofo-SW-Fixed.ckpt + YAML

BS-RoFormer SW Fixed ใช้ BS-Rofo-SW-Fixed.ckpt บวก BS-Rofo-SW-Fixed.yaml เพื่อแบ่งมิกซ์เต็มออกเป็น six WAV stems

เอาต์พุตเสียง: vocals, drums, bass, guitar, piano และ other WAV stems
มีประโยชน์สําหรับการทบทวนการเรียบเรียง สื่อการฝึกหัด การเตรียมรีมิกซ์ และเปลี่ยนเพลงผสมเป็นไฟล์ stem แยกต่างหาก

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

การเปรียบเทียบรุ่น

BS-RoFormer SW Fixed 6-stem

BS-RoFormer SW ตัวแยกเสียง six-stem คงที่

เลือกเนื่องจากเอาต์พุต BS-RoFormer SW Fixed 6-stem vocals, drums, bass, guitar, piano และอื่นๆ พร้อมการอ้างอิง MVSep และ BS-RoFormer สาธารณะ

หก WAV stems

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

HT Demucs

พื้นฐานการแยก / สํารอง

HT Demucs เป็นข้อมูลอ้างอิงโอเพ่นซอร์สที่แข็งแกร่ง เครื่องมือนี้ใช้ BS-RoFormer SW Fixed 6-stem เนื่องจากกําหนดเป้าหมายโดยตรงไปยัง stems ที่แสดงหกรายการ

บริบทหรือ stems สํารอง

facebookresearch/demucs HT Demucs paper

คู่มือพารามิเตอร์

รุ่น: BS-RoFormer SW Fixed 6-stem (BS-Rofo-SW-Fixed.ckpt)
เอาต์พุตเสียง: vocals, drums, bass, guitar, piano และ other WAV stems
ตัวเลือกโมเดล: การอ้างอิงอัลกอริทึม MVSep สาธารณะแสดงรายการนี้เป็น sep_type=63 TelkNet เรียกใช้น้ําหนัก SW BS-RoFormer ในเครื่อง ไม่ใช่งาน MVSep API ภายนอก ไม่มีการควบคุม add_opt ดังนั้นเครื่องมือจึงใช้การกําหนดค่าคุณภาพเริ่มต้นอย่างเป็นทางการ

เอกสาร / หมายเหตุทางเทคนิค

MVSep BS Roformer SW MVSep Multisong leaderboard BS-Rofo-SW-Fixed HF weights BS-Rofo-SW-Fixed mirror BS-RoFormer implementation bs-roformer-infer registry python-audio-separator BS-RoFormer

อินพุต

TelkNet QA — batch-a

การสาธิต

2 แทร็กเสียง

TelkNet QA — batch-a

ส่งออกสเต็มเป้าหมายหรือมิกซ์ที่ลบเป้าหมายนั้นแล้ว

0:00 / 0:30

กีตาร์

0.0 dB

0.00s

vocals

0.0 dB

0.00s

0:000:050:100:150:200:250:30

อยู่ระหว่างการบํารุงรักษา

เครื่องมือนี้อยู่ระหว่างการบํารุงรักษา โปรดลองอีกครั้งในภายหลัง

แสดงความคิดเห็นอย่างรวดเร็ว

เขียนข้อเสนอแนะหรือความต้องการของคุณที่นี่แล้วกดส่ง เรารับฟังทุกเสียงและมุ่งมั่นนำไอเดียดีๆ ไปสู่ฟีเจอร์จริง

แยก/ลบสเต็มแบบกำหนดเอง (RoFormer) · TelkNet