MuScriptor-large를 사용하면 혼합 녹음을 다중 악기 MIDI로 전환할 수 있습니다
MuScriptor-large를 사용하면 혼합 녹음을 다중 악기 MIDI로 전환할 수 있습니다
입력
mp3 / wav / flac와 같은 형식의 입력을 지원합니다
지원되는 포맷
출력
MuScriptor-large를 사용하면 혼합 녹음을 다중 악기 MIDI로 전환할 수 있습니다
사용 사례
MuScriptor-large를 사용하면 혼합 녹음을 다중 악기 MIDI로 전환할 수 있습니다
MuScriptor-large를 사용하면 혼합 녹음을 다중 악기 MIDI로 전환할 수 있습니다
이 경로는 최상위 MuScriptor-large checkpoint만 제공하며 small, medium 또는 양자화 fallback이 없습니다.
오픈 소스·로컬 배포 범위: 다운로드 가능한 가중치 또는 설정과 로컬 배포 경로가 확인된 항목만 포함합니다. SOTA와 최고 표시는 현재 보이는 검증 항목 안에서만 유효하며, 호스팅형·API 전용·상용 시스템을 포함하지 않고 전체 모델 순위도 아닙니다.
논문은 동일한 비공개 D_Test에서 CFG=1 최종 모델과 YourMT3+를 비교합니다. 독립 재현 결과가 없으며 MIROS나 다른 평가 프로토콜과 직접 비교할 수 없습니다.
| 평가 조건 | 모델 | 다중 악기 F1 (%) | 세부 지표 |
|---|---|---|---|
| D_Test / CFG=1 | MuScriptor-largeTelkNetPaper Table 1 | 48.20SOTA | 온셋 F1 (%)60.40최고프레임 F1 (%)73.30최고오프셋 F1 (%)49.00최고드럼 F1 (%)50.20최고 |
| D_Test / YPTF.MoE+Multi (noPS) | YourMT3+Paper Table 1 | 21.90 | 온셋 F1 (%)32.52프레임 F1 (%)45.54오프셋 F1 (%)17.79드럼 F1 (%)41.40 |
논문 표 2는 두 모델의 학습 데이터에 모두 포함되지 않은 8개 데이터셋에서 공개되고 로컬 배포 가능한 모델을 평가합니다. SOTA와 최고는 데이터셋별로 계산하며, 같은 프로토콜의 MIROS 결과가 없어 임의로 추가하지 않습니다.
| 평가 조건 | 모델 | 다중 악기 F1 (%) | 세부 지표 |
|---|---|---|---|
| Bach10 | YourMT3+Paper Table 2 | 26.4 | 온셋 F1 (%)59.8최고프레임 F1 (%)66.0오프셋 F1 (%)48.0최고 |
| Bach10 | MuScriptor-largeTelkNetPaper Table 2 | 34.7SOTA | 온셋 F1 (%)43.1프레임 F1 (%)85.0최고오프셋 F1 (%)36.0 |
| Dagstuhl ChoirSet | YourMT3+Paper Table 2 | 2.6 | 온셋 F1 (%)22.3최고프레임 F1 (%)51.0오프셋 F1 (%)10.8 |
| Dagstuhl ChoirSet | MuScriptor-largeTelkNetPaper Table 2 | 11.5SOTA | 온셋 F1 (%)14.4프레임 F1 (%)80.7최고오프셋 F1 (%)11.5최고 |
| PHENICX-Anechoic | YourMT3+Paper Table 2 | 12.2 | 온셋 F1 (%)56.7최고프레임 F1 (%)58.9오프셋 F1 (%)18.7 |
| PHENICX-Anechoic | MuScriptor-largeTelkNetPaper Table 2 | 25.7SOTA | 온셋 F1 (%)56.1프레임 F1 (%)74.6최고오프셋 F1 (%)32.6최고 |
| RWC-P | YourMT3+Paper Table 2 | 19.1 | 온셋 F1 (%)36.1프레임 F1 (%)51.6오프셋 F1 (%)20.6드럼 F1 (%)36.5 |
| RWC-P | MuScriptor-largeTelkNetPaper Table 2 | 25.6SOTA | 온셋 F1 (%)46.1최고프레임 F1 (%)61.2최고오프셋 F1 (%)25.6최고드럼 F1 (%)42.1최고 |
| RWC-C | YourMT3+Paper Table 2 | 40.5SOTA | 온셋 F1 (%)71.7최고프레임 F1 (%)71.3최고오프셋 F1 (%)44.3최고드럼 F1 (%)8.7 |
| RWC-C | MuScriptor-largeTelkNetPaper Table 2 | 36.0 | 온셋 F1 (%)67.7프레임 F1 (%)70.5오프셋 F1 (%)36.9드럼 F1 (%)23.7최고 |
| RWC-G | YourMT3+Paper Table 2 | 17.2 | 온셋 F1 (%)36.9프레임 F1 (%)49.4오프셋 F1 (%)20.5드럼 F1 (%)25.6 |
| RWC-G | MuScriptor-largeTelkNetPaper Table 2 | 23.7SOTA | 온셋 F1 (%)44.7최고프레임 F1 (%)58.7최고오프셋 F1 (%)24.4최고드럼 F1 (%)29.2최고 |
| RWC-J | YourMT3+Paper Table 2 | 26.4 | 온셋 F1 (%)52.9프레임 F1 (%)57.2오프셋 F1 (%)31.1드럼 F1 (%)30.6 |
| RWC-J | MuScriptor-largeTelkNetPaper Table 2 | 31.8SOTA | 온셋 F1 (%)59.4최고프레임 F1 (%)62.7최고오프셋 F1 (%)33.9최고드럼 F1 (%)31.3최고 |
| RWC-R | YourMT3+Paper Table 2 | 23.1SOTA | 온셋 F1 (%)46.1프레임 F1 (%)61.5오프셋 F1 (%)28.6최고드럼 F1 (%)51.3최고 |
| RWC-R | MuScriptor-largeTelkNetPaper Table 2 | 20.3 | 온셋 F1 (%)47.1최고프레임 F1 (%)68.6최고오프셋 F1 (%)24.8드럼 F1 (%)36.5 |
논문 표 4는 D_Real만으로 학습하고 동일한 비공개 D_Test를 사용합니다. 행의 크기는 논문의 표기이며 공개 체크포인트의 정확한 매개변수 수가 아닙니다.
| 논문 및 벤치마크 노트 | 모델 | 다중 악기 F1 (%) | 세부 지표 |
|---|---|---|---|
| D_Real only / conditioning on | MuScriptor 60MPaper Table 4 | 35.2 | 온셋 F1 (%)47.7프레임 F1 (%)65.7오프셋 F1 (%)35.3드럼 F1 (%)39.8 |
| D_Real only / conditioning on | MuScriptor 100MPaper Table 4 | 38.2 | 온셋 F1 (%)51.2프레임 F1 (%)67.2오프셋 F1 (%)38.7드럼 F1 (%)41.5 |
| D_Real only / conditioning on | MuScriptor 300MPaper Table 4 | 39.7 | 온셋 F1 (%)52.4프레임 F1 (%)68.0오프셋 F1 (%)40.3드럼 F1 (%)42.0 |
| D_Real only / conditioning on | MuScriptor 1.3BPaper Table 4 | 40.5 | 온셋 F1 (%)53.2프레임 F1 (%)68.7오프셋 F1 (%)41.0드럼 F1 (%)42.5 |
공개 신문 링크는 나와 있지 않으며; 공식 저장소나 runtime 구현을 소스로 사용하세요.
여기에 제안이나 요청을 작성해 제출하세요. 모든 의견을 귀담아듣고 좋은 아이디어를 실제 기능으로 만들기 위해 노력합니다.