Hva er MuScriptor Multi-Instrument Transkripsjon?

Gjør et blandet opptak til multi-instrument MIDI med MuScriptor-large; Støtter input i formater som mp3 / wav / flac

Hvem er MuScriptor Multi-Instrument Transkripsjon for?

MIDI / transkripsjon Gjør et blandet opptak til multi-instrument MIDI med MuScriptor-large; Støtter input i formater som mp3 / wav / flac

Hvilke oppgaver kan MuScriptor Multi-Instrument Transkripsjon hjelpe med?

MIDI / transkripsjon; Gjør et blandet opptak til multi-instrument MIDI med MuScriptor-large; Støtter input i formater som mp3 / wav / flac; Sjekk om de støttede inputformatene matcher materialet ditt; Bekreft om resultatet passer inn i din nåværende arbeidsflyt; Vei runtime og kreditter for å avgjøre om batchbehandling gir mening

Hvilke modell- og nøkkelordenheter er knyttet til MuScriptor Multi-Instrument Transkripsjon?

MuScriptor-large, MuScriptor source (pinned), MuScriptor-large weights (pinned), MuScriptor paper, MuScriptor Table 1, D_Test / CFG=1, Paper Table 1, YourMT3+

MuScriptor Multi-Instrument Transkripsjon

Forfatterrapportert sammenligning av MuScriptor-large

MuScriptor Table 1

På samme private D_Test sammenligner artikkelen den endelige CFG=1-modellen med YourMT3+. Resultatene er ikke uavhengig reprodusert og kan ikke sammenlignes direkte med MIROS eller andre protokoller.

Evalueringsbetingelse	Modell	Flerinstrument-F1 (%)	Detaljerte metrikker
D_Test / CFG=1	MuScriptor-largeTelkNetPaper Table 1	48.20SOTA	Onset-F1 (%)60.40BestRamme-F1 (%)73.30BestOffset-F1 (%)49.00BestTromme-F1 (%)50.20Best
D_Test / YPTF.MoE+Multi (noPS)	YourMT3+Paper Table 1	21.90	Onset-F1 (%)32.52Ramme-F1 (%)45.54Offset-F1 (%)17.79Tromme-F1 (%)41.40

MuScriptor mot YourMT3+ på åtte offentlige datasett

MuScriptor Table 2

Tabell 2 i artikkelen evaluerer de to publiserte, lokalt utrullbare modellene på åtte datasett som ikke inngikk i noen av treningssettene. SOTA og Best beregnes per datasett; MIROS legges ikke til fordi artikkelen ikke rapporterer en rad under denne protokollen.

Evalueringsbetingelse	Modell	Flerinstrument-F1 (%)	Detaljerte metrikker
Bach10	YourMT3+Paper Table 2	26.4	Onset-F1 (%)59.8BestRamme-F1 (%)66.0Offset-F1 (%)48.0Best
Bach10	MuScriptor-largeTelkNetPaper Table 2	34.7SOTA	Onset-F1 (%)43.1Ramme-F1 (%)85.0BestOffset-F1 (%)36.0
Dagstuhl ChoirSet	YourMT3+Paper Table 2	2.6	Onset-F1 (%)22.3BestRamme-F1 (%)51.0Offset-F1 (%)10.8
Dagstuhl ChoirSet	MuScriptor-largeTelkNetPaper Table 2	11.5SOTA	Onset-F1 (%)14.4Ramme-F1 (%)80.7BestOffset-F1 (%)11.5Best
PHENICX-Anechoic	YourMT3+Paper Table 2	12.2	Onset-F1 (%)56.7BestRamme-F1 (%)58.9Offset-F1 (%)18.7
PHENICX-Anechoic	MuScriptor-largeTelkNetPaper Table 2	25.7SOTA	Onset-F1 (%)56.1Ramme-F1 (%)74.6BestOffset-F1 (%)32.6Best
RWC-P	YourMT3+Paper Table 2	19.1	Onset-F1 (%)36.1Ramme-F1 (%)51.6Offset-F1 (%)20.6Tromme-F1 (%)36.5
RWC-P	MuScriptor-largeTelkNetPaper Table 2	25.6SOTA	Onset-F1 (%)46.1BestRamme-F1 (%)61.2BestOffset-F1 (%)25.6BestTromme-F1 (%)42.1Best
RWC-C	YourMT3+Paper Table 2	40.5SOTA	Onset-F1 (%)71.7BestRamme-F1 (%)71.3BestOffset-F1 (%)44.3BestTromme-F1 (%)8.7
RWC-C	MuScriptor-largeTelkNetPaper Table 2	36.0	Onset-F1 (%)67.7Ramme-F1 (%)70.5Offset-F1 (%)36.9Tromme-F1 (%)23.7Best
RWC-G	YourMT3+Paper Table 2	17.2	Onset-F1 (%)36.9Ramme-F1 (%)49.4Offset-F1 (%)20.5Tromme-F1 (%)25.6
RWC-G	MuScriptor-largeTelkNetPaper Table 2	23.7SOTA	Onset-F1 (%)44.7BestRamme-F1 (%)58.7BestOffset-F1 (%)24.4BestTromme-F1 (%)29.2Best
RWC-J	YourMT3+Paper Table 2	26.4	Onset-F1 (%)52.9Ramme-F1 (%)57.2Offset-F1 (%)31.1Tromme-F1 (%)30.6
RWC-J	MuScriptor-largeTelkNetPaper Table 2	31.8SOTA	Onset-F1 (%)59.4BestRamme-F1 (%)62.7BestOffset-F1 (%)33.9BestTromme-F1 (%)31.3Best
RWC-R	YourMT3+Paper Table 2	23.1SOTA	Onset-F1 (%)46.1Ramme-F1 (%)61.5Offset-F1 (%)28.6BestTromme-F1 (%)51.3Best
RWC-R	MuScriptor-largeTelkNetPaper Table 2	20.3	Onset-F1 (%)47.1BestRamme-F1 (%)68.6BestOffset-F1 (%)24.8Tromme-F1 (%)36.5

Ablasjon av MuScriptor-modellstørrelse

MuScriptor Table 4

Tabell 4 bruker bare D_Real-trening og samme private D_Test. Radstørrelsene er artikkelens etiketter, ikke nøyaktige parametertall for offentlige sjekkpunkter.

Notater om artikkel og referansenoter	Modell	Flerinstrument-F1 (%)	Detaljerte metrikker
D_Real only / conditioning on	MuScriptor 60MPaper Table 4	35.2	Onset-F1 (%)47.7Ramme-F1 (%)65.7Offset-F1 (%)35.3Tromme-F1 (%)39.8
D_Real only / conditioning on	MuScriptor 100MPaper Table 4	38.2	Onset-F1 (%)51.2Ramme-F1 (%)67.2Offset-F1 (%)38.7Tromme-F1 (%)41.5
D_Real only / conditioning on	MuScriptor 300MPaper Table 4	39.7	Onset-F1 (%)52.4Ramme-F1 (%)68.0Offset-F1 (%)40.3Tromme-F1 (%)42.0
D_Real only / conditioning on	MuScriptor 1.3BPaper Table 4	40.5	Onset-F1 (%)53.2Ramme-F1 (%)68.7Offset-F1 (%)41.0Tromme-F1 (%)42.5

MuScriptor Multi-Instrument Transkripsjon

Modeller, parametere og kilder

MuScriptor-large

Referansediagram: Forfatterrapportert sammenligning av MuScriptor-large / MuScriptor mot YourMT3+ på åtte offentlige datasett / Ablasjon av MuScriptor-modellstørrelse

Forfatterrapportert sammenligning av MuScriptor-large

MuScriptor mot YourMT3+ på åtte offentlige datasett

Ablasjon av MuScriptor-modellstørrelse

Offisielle / arkiver

Artikler / tekniske notater

Parameterguide

Bruksområder

Arbeidsflyt

Sjekkliste før flyvning

Rask tilbakemelding