모델
4스템 오디오 분리 백서: Huge-SCNet이 표준 MSS 목표에 맞는 이유
TelkNet의 현재 4스템 도구는 Huge-SCNet-4stems V1.2로 전체 믹스를 vocals, drums, bass, other로 나눕니다. 이 글은 MSS 아키텍처 흐름, Mel-Band RoFormer의 강점과 한계, SCNet의 서브밴드 모델링, 공개 4스템 점수를 통해 선택 이유를 설명합니다.
모델 분석 / TelkNet
TelkNet의 현재 4스템 도구는 Huge-SCNet-4stems V1.2로 전체 믹스를 vocals, drums, bass, other로 나눕니다. 이 글은 MSS 아키텍처 흐름, Mel-Band RoFormer의 강점과 한계, SCNet의 서브밴드 모델링, 공개 4스템 점수를 통해 선택 이유를 설명합니다.
아키텍처 절충
Mel-Band RoFormer는 mel-band와 RoPE 설계로 보컬 세부 표현에 강하지만, 4스템 분리는 드럼, 베이스, other의 고주파 악기 세부도 보호해야 합니다.
SCNet 계열은 서브밴드 모델링과 희소 압축으로 네 stem을 더 균형 있게 다룹니다. 그래서 Huge-SCNet-4stems V1.2가 현재 4스템 도구의 모델 경계입니다.
MVSep Ensemble은 품질 상한 참고로 쓸 수 있지만 단일 모델이 아니라 다중 모델 워크플로로 설명해야 합니다.
참고 자료
- huggingface.co/Aname-Tommy/Huge-SCNet-4stems/tree
- ZFTurbo pretrained models
- MVSep Multisong Leaderboard
- mvsep.com/algorithms/6
- mvsep.com/algorithms/49
- lucidrains/BS-RoFormer
- Kimberley Jensen Mel-Band Roformer Vocal Model
- Mel-RoFormer for Vocal Separation and Vocal Melody Transcription
- sigsep.github.io/datasets/musdb.html
- SCNet
- github.com/thuhcsi/SCNet
- Mel-Band RoFormer
- BS-RoFormer
- HTDemucs
출처 및 참고 자료
모델 카드huggingface.co/Aname-Tommy/Huge-SCNet-4stems/tree저장소ZFTurbo pretrained models출처MVSep Multisong Leaderboard공식mvsep.com/algorithms/6출처mvsep.com/algorithms/49저장소lucidrains/BS-RoFormer저장소Kimberley Jensen Mel-Band Roformer Vocal Model연구Mel-RoFormer for Vocal Separation and Vocal Melody Transcription출처sigsep.github.io/datasets/musdb.html연구SCNet저장소github.com/thuhcsi/SCNet연구Mel-Band RoFormer연구BS-RoFormer연구HTDemucs