Chuyển âm MIDI đa nhạc cụ (YourMT3+) · TelkNet

MIDI/phiên âmKhối lượng công việc GPU

Chuyển âm MIDI đa nhạc cụ (YourMT3+)

Người dùng cần MIDI có thể chỉnh sửa từ bản kết hợp đầy đủ một cách nhanh chóng

Bản nháp MIDI đa nhạc cụ để chấm điểm, sắp xếp, phân tích hòa âm và dọn dẹp DAW

Tín dụng/sử dụng 3Đầu vào tập tin âm thanhTối đa 50 MBƯớc tính 180-900 giây

đầu vào

Toàn bộ bài hát, bản hòa tấu hoặc bản trình diễn nhiều nhạc cụ thông qua đường dẫn YourMT3+ AMT

Định dạng âm thanh

mp3wavflacoggm4aaac

đầu ra

Bản nháp MIDI đa nhạc cụ để chấm điểm, sắp xếp, phân tích hòa âm và dọn dẹp DAW

Tốt nhất cho

Người dùng cần MIDI có thể chỉnh sửa từ bản kết hợp đầy đủ một cách nhanh chóng

Mô hình, thông số và nguồn

Chuyển âm MIDI đa nhạc cụ (YourMT3+) dùng họ checkpoint YourMT3+ chính thức để chuyển âm bản mix đầy đủ nhiều nhạc cụ.

YourMT3+

Điểm kiểm tra YourMT3+ để sao chép nhạc tự động nhiều nhạc cụ trên các bản phối hoặc bản demo đầy đủ.

mimbres/YourMT3 TelkNet music-to-midi adapter YourMT3 arXiv MT3 arXiv 2025 AMT Challenge paper Official leaderboard

Kiến trúc: AMT đa nhạc cụ dựa trên biến áp cho các bản phối và demo đầy đủ.
Được đề xuất cho: phiên âm nhiều nhạc cụ rộng rãi khi nguồn không chỉ có piano.
Đầu ra: MIDI nhiều bản nhạc có thể chỉnh sửa với các bản nhạc hướng đến nhạc cụ.

So sánh mô hình

người mẫu

Vai trò

Tại sao nó được sử dụng

Tác động đầu ra

người mẫuMIROS

amt-os/ai4m-miros 2025 AMT Challenge paper Official leaderboard

Vai tròChương trình phụ trợ AMT thay thế

Tại sao nó được sử dụngHữu ích khi phần phụ trợ phiên âm thứ hai cung cấp bản nháp tốt hơn cho nguồn.

Tác động đầu raBản nháp MIDI đa nhạc cụ thay thế

người mẫuYourMT3+ YPTF.MoE+Multi

mimbres/YourMT3 YourMT3 arXiv 2025 AMT Challenge paper Official leaderboard

Vai tròĐường dẫn phiên âm thông minh mặc định

Tại sao nó được sử dụngYourMT3+ là tuyến phiên âm tổng hợp đầy đủ chính được Smart Music cung cấp.

Tác động đầu raBản nháp MIDI nhiều bản nhạc có thể chỉnh sửa

người mẫuMT3 baseline

MT3 arXiv 2025 AMT Challenge paper Official leaderboard

Vai tròBối cảnh cơ sở nghiên cứu

Tại sao nó được sử dụngMT3 cung cấp ngữ cảnh cho AMT đa công cụ, nhưng nó không phải là đường dẫn mặc định hoạt động.

Tác động đầu raTham khảo hành vi sao chép đa công cụ

Biểu đồ điểm chuẩn công khai

Điểm số là các hàng tham chiếu MVSep hoặc điểm chuẩn công khai. Chúng không phải là bản chạy TelkNet mới trên tệp đã tải lên.

Bối cảnh thách thức AMT

Official leaderboard

Các hàng thử thách cung cấp bối cảnh phiên âm đa nhạc cụ công khai; điểm số phụ thuộc vào tập dữ liệu và giao thức đánh giá.

MIROS#1

F1% 59.98% chính xác 65.58Thu hồi % 57.24% chồng chéo 73.91Thời gian chạy (đơn vị nguồn) 22.05

MIROS được liệt kê dưới dạng chương trình phụ trợ AMT đa công cụ thay thế trong đó bối cảnh điểm chuẩn công khai rất hữu ích.

YourMT3-YPTF-MoE-M#2

F1% 59.38% chính xác 60.10Thu hồi % 58.88% chồng chéo 73.05Thời gian chạy (đơn vị nguồn) 12.60

MT3 baseline#5

F1% 39.32

MT3 là tham chiếu cơ sở cho hoạt động sao chép đa công cụ, không phải là mặc định TelkNet đang hoạt động.

Basic Pitch#14

F1% 6.34

Bối cảnh đa công cụ YourMT3+

YourMT3+ paper

Các hàng YourMT3+ hiển thị ngữ cảnh phiên âm nhiều nhạc cụ trên các bản phối kiểu Slakh.

YPTF.MoE+Multi (PS)YourMT3+

Khởi phát F1 % 84.60Bù đắp F1 % 70.70Trống F1 % 90.10

PerceiverTFpaper baseline

Khởi phát F1 % 81.90Trống F1 % 78.30

MT3paper baseline

Khởi phát F1 % 76.00Bù đắp F1 % 57.00

Giấy và ghi chú chuẩn

YourMT3+: Multi-instrument Music Transcription

IEEE MLSP - 2024

YourMT3+ cung cấp bối cảnh AMT nhiều nhạc cụ để chuyển các bản phối âm thanh đầy đủ thành các bản nhạc MIDI.

arXiv:2407.04822

MT3: Multi-Task Multitrack Music Transcription

ICLR - 2022

MT3 là mô hình tham chiếu phiên âm nhạc đa bản nhạc đa tác vụ để hiểu hành vi AMT.

arXiv:2111.03017

Advancing Multi-Instrument Music Transcription: Results from the 2025 AMT Challenge

arXiv / OpenReview - 2026

Tham chiếu thử thách AMT cung cấp bối cảnh so sánh phiên âm nhiều công cụ trên các hệ thống và bộ dữ liệu.

arXiv:2603.27528

Chính thức/kho

mimbres/YourMT3 TelkNet music-to-midi adapter

Giấy tờ/ghi chú kỹ thuật

YourMT3 arXiv MT3 arXiv 2025 AMT Challenge paper Official leaderboard

Hướng dẫn tham số

YourMT3 checkpoint: bộ chọn Colab nâng cao; mặc định dùng khuyến nghị upstream Space YPTF.MoE+Multi (noPS).

Trường hợp sử dụng

Phiên âm đầy đủ các bản demo và phân tích sự hài hòa
Biến bản ghi ý tưởng thành MIDI có thể chỉnh sửa
Bắt đầu với bản nháp nhiều bản nhạc, sau đó tinh chỉnh theo công cụ trong DAW

Quy trình làm việc

1Tải lên tệp âm thanh đầy đủ với nhịp độ ổn định
2Đợi phát hiện nhiều nhạc cụ để tạo MIDI
3Nhập kết quả vào DAW của bạn để sửa vận tốc, lượng tử hóa và theo dõi

Danh sách kiểm tra trước chuyến bay

Giữ âm thanh ở nhịp độ ổn định và tránh những khoảng im lặng kéo dài
Những sắp xếp phức tạp hơn cần chỉnh sửa ghi chú thủ công hơn sau đó
Đối với đàn piano solo, thay vào đó hãy chuyển sang mẫu đàn piano chuyên dụng

Cần đăng nhập để sử dụng công cụ này

Đăng nhập hoặc tạo tài khoản để tải tệp lên, gửi nhiệm vụ và xem lại kết quả trong không gian làm việc của bạn.

Thông tin công cụ duyệt web luôn miễn phí - không cần tài khoản.