O que é Transcrição de múltiplos instrumentos MuScriptor?

Transforme uma gravação mixada em MIDI multi-instrumento com MuScriptor-large; Suporta entradas em formatos como mp3 / wav / flac

Para quem é Transcrição de múltiplos instrumentos MuScriptor?

MIDI / transcrição Transforme uma gravação mixada em MIDI multi-instrumento com MuScriptor-large; Suporta entradas em formatos como mp3 / wav / flac

Com quais tarefas Transcrição de múltiplos instrumentos MuScriptor pode ajudar?

MIDI / transcrição; Transforme uma gravação mixada em MIDI multi-instrumento com MuScriptor-large; Suporta entradas em formatos como mp3 / wav / flac; Verifique se os formatos de entrada suportados correspondem ao seu material; Confirme se o resultado se encaixa no seu fluxo de trabalho atual; Pese runtime e créditos para decidir se o processamento em lote faz sentido

Quais modelos e entidades de palavras-chave estão conectados ao Transcrição de múltiplos instrumentos MuScriptor?

MuScriptor-large, MuScriptor source (pinned), MuScriptor-large weights (pinned), MuScriptor paper, MuScriptor Table 1, D_Test / CFG=1, Paper Table 1, YourMT3+

Transcrição de múltiplos instrumentos MuScriptor

MuScriptor-large

Este caminho expõe somente o checkpoint principal MuScriptor-large; não há fallback para small, medium ou quantizado.

MuScriptor source (pinned)MuScriptor-large weights (pinned)MuScriptor paper

Identidade exata: 1.366.399.488 parâmetros F32; safetensors de 5.465.642.136 bytes; revision 8809fdfbed2affa7ade94a7059e746e3880720e7.
Transformer decoder-only com 48 camadas, largura 1536 e 24 cabeças; áudio mono a 16 kHz, blocos de 5 s e mel de 512 bins a 100 Hz.
Gera MIDI multifaixa Type-1; 35 rótulos da interface mapeiam 36 grupos aprendidos. A velocity continua fixa em 100. O processamento detecta e grava automaticamente o BPM da fonte. Após a conclusão, a velocidade de reprodução e o BPM podem ser ajustados no controle de prévia, e o download usa a configuração atual desse controle. As mudanças de tempo da fonte não são reconstruídas.

Gráfico de referência: Comparação do MuScriptor-large relatada pelos autores / MuScriptor versus YourMT3+ em oito conjuntos públicos / Ablação de escala do modelo MuScriptor

Escopo aberto e implantável: estas tabelas incluem apenas linhas com pesos ou configurações baixáveis verificados e um caminho de implantação local. SOTA e Melhor valem apenas entre as linhas verificadas exibidas; não incluem serviços hospedados, somente API ou comerciais e não formam um ranking universal.

Comparação do MuScriptor-large relatada pelos autores

MuScriptor Table 1

No mesmo D_Test privado, o artigo compara o modelo final com CFG=1 ao YourMT3+. Os resultados não têm reprodução independente e não são diretamente comparáveis ao MIROS ou a outros protocolos.

Condição de avaliação	Modelo	F1 multi-instrumento (%)	Métricas detalhadas
D_Test / CFG=1	MuScriptor-largeTelkNetPaper Table 1	48.20SOTA	F1 de início (%)60.40MelhorF1 por quadro (%)73.30MelhorF1 de término (%)49.00MelhorF1 de bateria (%)50.20Melhor
D_Test / YPTF.MoE+Multi (noPS)	YourMT3+Paper Table 1	21.90	F1 de início (%)32.52F1 por quadro (%)45.54F1 de término (%)17.79F1 de bateria (%)41.40

MuScriptor versus YourMT3+ em oito conjuntos públicos

MuScriptor Table 2

A Tabela 2 do artigo avalia os dois modelos publicados e implantáveis localmente em oito conjuntos ausentes do treinamento de ambos. SOTA e Melhor são calculados em cada conjunto; MIROS não é incluído porque o artigo não informa uma linha nesse protocolo.

Condição de avaliação	Modelo	F1 multi-instrumento (%)	Métricas detalhadas
Bach10	YourMT3+Paper Table 2	26.4	F1 de início (%)59.8MelhorF1 por quadro (%)66.0F1 de término (%)48.0Melhor
Bach10	MuScriptor-largeTelkNetPaper Table 2	34.7SOTA	F1 de início (%)43.1F1 por quadro (%)85.0MelhorF1 de término (%)36.0
Dagstuhl ChoirSet	YourMT3+Paper Table 2	2.6	F1 de início (%)22.3MelhorF1 por quadro (%)51.0F1 de término (%)10.8
Dagstuhl ChoirSet	MuScriptor-largeTelkNetPaper Table 2	11.5SOTA	F1 de início (%)14.4F1 por quadro (%)80.7MelhorF1 de término (%)11.5Melhor
PHENICX-Anechoic	YourMT3+Paper Table 2	12.2	F1 de início (%)56.7MelhorF1 por quadro (%)58.9F1 de término (%)18.7
PHENICX-Anechoic	MuScriptor-largeTelkNetPaper Table 2	25.7SOTA	F1 de início (%)56.1F1 por quadro (%)74.6MelhorF1 de término (%)32.6Melhor
RWC-P	YourMT3+Paper Table 2	19.1	F1 de início (%)36.1F1 por quadro (%)51.6F1 de término (%)20.6F1 de bateria (%)36.5
RWC-P	MuScriptor-largeTelkNetPaper Table 2	25.6SOTA	F1 de início (%)46.1MelhorF1 por quadro (%)61.2MelhorF1 de término (%)25.6MelhorF1 de bateria (%)42.1Melhor
RWC-C	YourMT3+Paper Table 2	40.5SOTA	F1 de início (%)71.7MelhorF1 por quadro (%)71.3MelhorF1 de término (%)44.3MelhorF1 de bateria (%)8.7
RWC-C	MuScriptor-largeTelkNetPaper Table 2	36.0	F1 de início (%)67.7F1 por quadro (%)70.5F1 de término (%)36.9F1 de bateria (%)23.7Melhor
RWC-G	YourMT3+Paper Table 2	17.2	F1 de início (%)36.9F1 por quadro (%)49.4F1 de término (%)20.5F1 de bateria (%)25.6
RWC-G	MuScriptor-largeTelkNetPaper Table 2	23.7SOTA	F1 de início (%)44.7MelhorF1 por quadro (%)58.7MelhorF1 de término (%)24.4MelhorF1 de bateria (%)29.2Melhor
RWC-J	YourMT3+Paper Table 2	26.4	F1 de início (%)52.9F1 por quadro (%)57.2F1 de término (%)31.1F1 de bateria (%)30.6
RWC-J	MuScriptor-largeTelkNetPaper Table 2	31.8SOTA	F1 de início (%)59.4MelhorF1 por quadro (%)62.7MelhorF1 de término (%)33.9MelhorF1 de bateria (%)31.3Melhor
RWC-R	YourMT3+Paper Table 2	23.1SOTA	F1 de início (%)46.1F1 por quadro (%)61.5F1 de término (%)28.6MelhorF1 de bateria (%)51.3Melhor
RWC-R	MuScriptor-largeTelkNetPaper Table 2	20.3	F1 de início (%)47.1MelhorF1 por quadro (%)68.6MelhorF1 de término (%)24.8F1 de bateria (%)36.5

Ablação de escala do modelo MuScriptor

MuScriptor Table 4

A Tabela 4 usa treinamento somente com D_Real e o mesmo D_Test privado. Os tamanhos das linhas são rótulos do artigo, não contagens exatas de parâmetros dos checkpoints públicos.

Notas de papel e benchmarks	Modelo	F1 multi-instrumento (%)	Métricas detalhadas
D_Real only / conditioning on	MuScriptor 60MPaper Table 4	35.2	F1 de início (%)47.7F1 por quadro (%)65.7F1 de término (%)35.3F1 de bateria (%)39.8
D_Real only / conditioning on	MuScriptor 100MPaper Table 4	38.2	F1 de início (%)51.2F1 por quadro (%)67.2F1 de término (%)38.7F1 de bateria (%)41.5
D_Real only / conditioning on	MuScriptor 300MPaper Table 4	39.7	F1 de início (%)52.4F1 por quadro (%)68.0F1 de término (%)40.3F1 de bateria (%)42.0
D_Real only / conditioning on	MuScriptor 1.3BPaper Table 4	40.5	F1 de início (%)53.2F1 por quadro (%)68.7F1 de término (%)41.0F1 de bateria (%)42.5

Oficiais / repositórios

MuScriptor source (pinned)MuScriptor-large weights (pinned)MuScriptor paper

Artigos / notas técnicas

Nenhum link público para papel está listado; Use o repositório oficial ou a implementação runtime como fonte.

Transcrição de múltiplos instrumentos MuScriptor

Modelos, parâmetros e fontes

MuScriptor-large

Gráfico de referência: Comparação do MuScriptor-large relatada pelos autores / MuScriptor versus YourMT3+ em oito conjuntos públicos / Ablação de escala do modelo MuScriptor

Comparação do MuScriptor-large relatada pelos autores

MuScriptor versus YourMT3+ em oito conjuntos públicos

Ablação de escala do modelo MuScriptor

Oficiais / repositórios

Artigos / notas técnicas

Guia de parâmetros

Casos de uso

Fluxo de trabalho

Checklist pré-voo

Feedback rápido