Was ist MuScriptor Multi-Instrumenten-Transkription?

Verwandeln Sie eine gemischte Aufnahme mit MuScriptor-large in Multi-Instrumenten-MIDI; Unterstützt Eingaben in Formaten wie mp3 / wav / flac

Für wen ist MuScriptor Multi-Instrumenten-Transkription?

MIDI / Transkription Verwandeln Sie eine gemischte Aufnahme mit MuScriptor-large in Multi-Instrumenten-MIDI; Unterstützt Eingaben in Formaten wie mp3 / wav / flac

Bei welchen Aufgaben kann MuScriptor Multi-Instrumenten-Transkription helfen?

MIDI / Transkription; Verwandeln Sie eine gemischte Aufnahme mit MuScriptor-large in Multi-Instrumenten-MIDI; Unterstützt Eingaben in Formaten wie mp3 / wav / flac; Überprüfe, ob die unterstützten Eingabeformate zu deinem Material passen; Bestätigen Sie, ob das Ergebnis zu Ihrem aktuellen Arbeitsablauf passt; Wiegen Sie runtime und Gutschriften ab, um zu entscheiden, ob die Batch-Verarbeitung sinnvoll ist.

Welche Modell- und Keyword-Entitäten sind mit MuScriptor Multi-Instrumenten-Transkription verbunden?

MuScriptor-large, MuScriptor source (pinned), MuScriptor-large weights (pinned), MuScriptor paper, MuScriptor Table 1, D_Test / CFG=1, Paper Table 1, YourMT3+

MuScriptor Multi-Instrumenten-Transkription

Von den Autoren berichteter Vergleich von MuScriptor-large

MuScriptor Table 1

Auf demselben privaten D_Test vergleicht die Arbeit das finale CFG=1-Modell mit YourMT3+. Die Ergebnisse wurden nicht unabhängig reproduziert und sind nicht direkt mit MIROS oder anderen Protokollen vergleichbar.

Evaluierungsbedingung	Modell	Multi-Instrument-F1 (%)	Detaillierte Metriken
D_Test / CFG=1	MuScriptor-largeTelkNetPaper Table 1	48.20SOTA	Onset-F1 (%)60.40BestwertFrame-F1 (%)73.30BestwertOffset-F1 (%)49.00BestwertSchlagzeug-F1 (%)50.20Bestwert
D_Test / YPTF.MoE+Multi (noPS)	YourMT3+Paper Table 1	21.90	Onset-F1 (%)32.52Frame-F1 (%)45.54Offset-F1 (%)17.79Schlagzeug-F1 (%)41.40

MuScriptor und YourMT3+ auf acht öffentlichen Datensätzen

MuScriptor Table 2

Tabelle 2 der Veröffentlichung bewertet die beiden veröffentlichten, lokal einsetzbaren Modelle auf acht Datensätzen, die in keinem der Trainingssätze enthalten waren. SOTA und Bestwert werden je Datensatz berechnet; MIROS wird nicht ergänzt, da es für dieses Protokoll keine veröffentlichte Zeile gibt.

Evaluierungsbedingung	Modell	Multi-Instrument-F1 (%)	Detaillierte Metriken
Bach10	YourMT3+Paper Table 2	26.4	Onset-F1 (%)59.8BestwertFrame-F1 (%)66.0Offset-F1 (%)48.0Bestwert
Bach10	MuScriptor-largeTelkNetPaper Table 2	34.7SOTA	Onset-F1 (%)43.1Frame-F1 (%)85.0BestwertOffset-F1 (%)36.0
Dagstuhl ChoirSet	YourMT3+Paper Table 2	2.6	Onset-F1 (%)22.3BestwertFrame-F1 (%)51.0Offset-F1 (%)10.8
Dagstuhl ChoirSet	MuScriptor-largeTelkNetPaper Table 2	11.5SOTA	Onset-F1 (%)14.4Frame-F1 (%)80.7BestwertOffset-F1 (%)11.5Bestwert
PHENICX-Anechoic	YourMT3+Paper Table 2	12.2	Onset-F1 (%)56.7BestwertFrame-F1 (%)58.9Offset-F1 (%)18.7
PHENICX-Anechoic	MuScriptor-largeTelkNetPaper Table 2	25.7SOTA	Onset-F1 (%)56.1Frame-F1 (%)74.6BestwertOffset-F1 (%)32.6Bestwert
RWC-P	YourMT3+Paper Table 2	19.1	Onset-F1 (%)36.1Frame-F1 (%)51.6Offset-F1 (%)20.6Schlagzeug-F1 (%)36.5
RWC-P	MuScriptor-largeTelkNetPaper Table 2	25.6SOTA	Onset-F1 (%)46.1BestwertFrame-F1 (%)61.2BestwertOffset-F1 (%)25.6BestwertSchlagzeug-F1 (%)42.1Bestwert
RWC-C	YourMT3+Paper Table 2	40.5SOTA	Onset-F1 (%)71.7BestwertFrame-F1 (%)71.3BestwertOffset-F1 (%)44.3BestwertSchlagzeug-F1 (%)8.7
RWC-C	MuScriptor-largeTelkNetPaper Table 2	36.0	Onset-F1 (%)67.7Frame-F1 (%)70.5Offset-F1 (%)36.9Schlagzeug-F1 (%)23.7Bestwert
RWC-G	YourMT3+Paper Table 2	17.2	Onset-F1 (%)36.9Frame-F1 (%)49.4Offset-F1 (%)20.5Schlagzeug-F1 (%)25.6
RWC-G	MuScriptor-largeTelkNetPaper Table 2	23.7SOTA	Onset-F1 (%)44.7BestwertFrame-F1 (%)58.7BestwertOffset-F1 (%)24.4BestwertSchlagzeug-F1 (%)29.2Bestwert
RWC-J	YourMT3+Paper Table 2	26.4	Onset-F1 (%)52.9Frame-F1 (%)57.2Offset-F1 (%)31.1Schlagzeug-F1 (%)30.6
RWC-J	MuScriptor-largeTelkNetPaper Table 2	31.8SOTA	Onset-F1 (%)59.4BestwertFrame-F1 (%)62.7BestwertOffset-F1 (%)33.9BestwertSchlagzeug-F1 (%)31.3Bestwert
RWC-R	YourMT3+Paper Table 2	23.1SOTA	Onset-F1 (%)46.1Frame-F1 (%)61.5Offset-F1 (%)28.6BestwertSchlagzeug-F1 (%)51.3Bestwert
RWC-R	MuScriptor-largeTelkNetPaper Table 2	20.3	Onset-F1 (%)47.1BestwertFrame-F1 (%)68.6BestwertOffset-F1 (%)24.8Schlagzeug-F1 (%)36.5

Ablation der MuScriptor-Modellgröße

MuScriptor Table 4

Tabelle 4 verwendet ausschließlich D_Real-Training und denselben privaten D_Test. Die Zeilengrößen sind Bezeichnungen der Arbeit, nicht die exakten Parameterzahlen öffentlicher Checkpoints.

Papier- und Benchmark-Notizen	Modell	Multi-Instrument-F1 (%)	Detaillierte Metriken
D_Real only / conditioning on	MuScriptor 60MPaper Table 4	35.2	Onset-F1 (%)47.7Frame-F1 (%)65.7Offset-F1 (%)35.3Schlagzeug-F1 (%)39.8
D_Real only / conditioning on	MuScriptor 100MPaper Table 4	38.2	Onset-F1 (%)51.2Frame-F1 (%)67.2Offset-F1 (%)38.7Schlagzeug-F1 (%)41.5
D_Real only / conditioning on	MuScriptor 300MPaper Table 4	39.7	Onset-F1 (%)52.4Frame-F1 (%)68.0Offset-F1 (%)40.3Schlagzeug-F1 (%)42.0
D_Real only / conditioning on	MuScriptor 1.3BPaper Table 4	40.5	Onset-F1 (%)53.2Frame-F1 (%)68.7Offset-F1 (%)41.0Schlagzeug-F1 (%)42.5

MuScriptor Multi-Instrumenten-Transkription

Modelle, Parameter und Quellen

MuScriptor-large

Benchmark-Chart: Von den Autoren berichteter Vergleich von MuScriptor-large / MuScriptor und YourMT3+ auf acht öffentlichen Datensätzen / Ablation der MuScriptor-Modellgröße

Von den Autoren berichteter Vergleich von MuScriptor-large

MuScriptor und YourMT3+ auf acht öffentlichen Datensätzen

Ablation der MuScriptor-Modellgröße

Offizielle / Repositorien

Arbeiten / technische Anmerkungen

Parameterleitfaden

Anwendungsfälle

Arbeitsablauf

Vorflug-Checkliste

Schnelles Feedback