Yükleniyor...

Vokalden MIDI’ye · ROSVOT / GAME · TelkNet

MIDI / transkripsiyonGPU iş yüküSOME · Kaynak kod SOME v1.0.0-baseline · Ağırlıklar SOME v1.0.0-baseline · Değişiklik Günlüğü SOME · Makale

Vokalden MIDI’ye

Şarkı, mırıldanma veya vokal kanallarını MIDI'ye dönüştürün. Melodiyi düzeltmeden önce ROSVOT, GAME, SOME ve VOCANO'yu karşılaştırın.

25 kredi/kullanımDosya girişiMaksimum 100 MBTahmini 45-1800 saniye

Giriş

Yalın vokal, mırıldanma veya ayrılmış ana vokal yükleyin. Yalnızca bitmiş şarkı varsa “Tam şarkı”yı seçin; ana vokal yazımdan önce ayrılır.

Desteklenen formatlar

mp3wavflacoggm4aaacaifaiffmp4movmkv

Çıktı

MIDI

Kullanım Durumu

Söylenen bir melodiyi düzenleme, ikiye katlama, synth programlama veya notasyon taslağı için DAW'ya kopyalama.

Model ailesini seçin

Vokalden MIDI’ye · ROSVOTMevcutGürültülü ya da eşlik sızıntılı şarkılar için dayanıklı yol; mevcut resmî kontrol noktası ağırlıklı olarak Mandarin şarkılarıyla eğitilmiştir.Vokalden MIDI’ye · GAMEMevcutŞarkı dilini, bölümlemeyi ve nota algılamayı ayarlayarak şarkı söylemeyi MIDI’ye dönüştürür.Vokalden MIDI’ye · SOMEMevcutSOME hızlı ve hafif şarkıdan MIDI’ye rotadır.Vokalden MIDI’ye · VOCANOMevcutVOCANO vokal perdesini Patch-CNN ile çıkarır ve nota sınırlarını PyramidNet-110 ile belirler. Yayımlanan çıkarım girişinde ek model ayarı yoktur.

Malzemenize ve amacınıza uygun modeli seçin, göndermeden önce örnekleri inceleyin.

Ücret, süre, biçimler ve parametreler seçilen modele bağlıdır.

Hızlı geri bildirim

Geri bildiriminizde araç adını, adımları ve sorunu belirtin. Ekran görüntüleri sorunu bulmamıza yardımcı olabilir.

Modeller, parametreler ve kaynaklar

SOME hızlı ve hafif şarkıdan MIDI’ye rotadır.

ROSVOTROSVOT paper, Table 1ROSVOT + RWBDVOCANO: A Note Transcription Framework for Singing Voice in Polyphonic MusicRobust Singing Voice Transcription Serves SynthesisGAME: Generative Adaptive MIDI ExtractorSOME: Singing-Oriented MIDI ExtractorGAMESOMEVOCANO

ROSVOT

Gürültülü ya da eşlik sızıntılı şarkılar için dayanıklı yol; mevcut resmî kontrol noktası ağırlıklı olarak Mandarin şarkılarıyla eğitilmiştir.

ROSVOT source (pinned)ROSVOT project page ROSVOT paper

ROSVOT nota sınırı eşiği: varsayılan 0.85; aralık 0–1.
ROSVOT kelime sınırı eşiği: varsayılan 0.5; aralık 0–1.

GAME

Şarkı dilini, bölümlemeyi ve nota algılamayı ayarlayarak şarkı söylemeyi MIDI’ye dönüştürür.

GAME v1.0.3 source (pinned)GAME v1.0.3 weights GAME v1.0.3 technical guide (pinned)GAME v1.0.3 ONNX guide (pinned)

GAME’in resmî dil kimliği 0’ı kullanması için alanı boş bırakın. Bu otomatik dil algılama değildir; dili biliyorsanız seçin.
Bölütleme eşiği — Resmî model ayarıdır; emin değilseniz varsayılanı koruyun.
Bölütleme yarıçapı (sn) — Resmî model ayarıdır; emin değilseniz varsayılanı koruyun.
D3PM başlangıç zamanı — Resmî model ayarıdır; emin değilseniz varsayılanı koruyun.
GAME gürültü giderme adımları: varsayılan 8; aralık 1–128.
Tahmin eşiği — Resmî model ayarıdır; emin değilseniz varsayılanı koruyun.
Transkripsiyondan sonra özgün vuruşları analiz edip notaların zamanlarını koruyarak tempoyu MIDI’ye yazar.
GAME v1.0.3 için ayrı değerlendirme sonuçları henüz listelenmedi.

SOME

SOME source (pinned)SOME baseline weights SOME technical guide (pinned)

Transkripsiyondan sonra özgün vuruşları analiz edip notaların zamanlarını koruyarak tempoyu MIDI’ye yazar.

VOCANO

VOCANO vokal perdesini Patch-CNN ile çıkarır ve nota sınırlarını PyramidNet-110 ile belirler. Yayımlanan çıkarım girişinde ek model ayarı yoktur.

VOCANO source and official weights VOCANO ISMIR 2021 paper

Akapella veya önceden ayrılmış vokal için “Yalın vokal / vokal kanalı”nı seçin. “Tam şarkı”da önce ana vokal ayrılır.

Makale ve kıyaslama notları

VOCANO: A Note Transcription Framework for Singing Voice in Polyphonic Music

ISMIR - 2021

VOCANO vokal perdesini Patch-CNN ile çıkarır ve nota sınırlarını PyramidNet-110 ile belirler. Yayımlanan çıkarım girişinde ek model ayarı yoktur.

Official source and citation

Robust Singing Voice Transcription Serves Synthesis

ACL - 2024

Gürültülü ya da eşlik sızıntılı şarkılar için dayanıklı yol; mevcut resmî kontrol noktası ağırlıklı olarak Mandarin şarkılarıyla eğitilmiştir.

Paper

GAME: Generative Adaptive MIDI Extractor

Official technical guide - 2026

Şarkı dilini, bölümlemeyi ve nota algılamayı ayarlayarak şarkı söylemeyi MIDI’ye dönüştürür.

v1.0.3 technical guide (pinned)v1.0.3 ONNX guide (pinned)v1.0.3 weights

SOME: Singing-Oriented MIDI Extractor

Official technical guide - 2023

Technical guide (pinned)Baseline weights

Resmi / depolar

ROSVOT source (pinned)ROSVOT project page GAME v1.0.3 source (pinned)GAME v1.0.3 weights SOME source (pinned)SOME baseline weights VOCANO source and official weights

Makaleler / teknik notlar

ROSVOT paper GAME v1.0.3 technical guide (pinned)GAME v1.0.3 ONNX guide (pinned)SOME technical guide (pinned)VOCANO ISMIR 2021 paper

Parametre rehberi

Akapella veya önceden ayrılmış vokal için “Yalın vokal / vokal kanalı”nı seçin. “Tam şarkı”da önce ana vokal ayrılır.
GAME’in resmî dil kimliği 0’ı kullanması için alanı boş bırakın. Bu otomatik dil algılama değildir; dili biliyorsanız seçin.
Bölütleme eşiği — Resmî model ayarıdır; emin değilseniz varsayılanı koruyun.
Bölütleme yarıçapı (sn) — Resmî model ayarıdır; emin değilseniz varsayılanı koruyun.
D3PM başlangıç zamanı — Resmî model ayarıdır; emin değilseniz varsayılanı koruyun.
GAME gürültü giderme adımları: varsayılan 8; aralık 1–128.
Tahmin eşiği — Resmî model ayarıdır; emin değilseniz varsayılanı koruyun.
Transkripsiyondan sonra özgün vuruşları analiz edip notaların zamanlarını koruyarak tempoyu MIDI’ye yazar.
ROSVOT nota sınırı eşiği: varsayılan 0.85; aralık 0–1.
ROSVOT kelime sınırı eşiği: varsayılan 0.5; aralık 0–1.

Kullanım Durumları

Baş vokal satırını düzenlenebilir notalara dönüştürün.
Kayıtta taşma, gürültü veya net olmayan nota sınırları olduğunda dört transkripsiyon modelini karşılaştırın.
MIDI'yu DAW'da kılavuz iz olarak kullanın, ardından perdeleri ve nota uzunluklarını kulaktan kulağa düzeltin.

İş Akışı

1Ses türünü seçin ve yalın vokal, vokal kanalı veya tam şarkı yükleyin. Tam şarkı önce ayrılır.
2Önce varsayılan modeli kullanın; tek sonucu değerlendirmek zorsa dört sürümü karşılaştırın.
3Orijinal vokal ile her piyano rulosu arasında geçiş yapın, seçilen MIDI'yu düzeltin ve ardından indirin.

Kontrol edilecekler

Bu araç, söylenen baş melodiyi takip eder; davulları, akorları veya komple bir düzenlemeyi yeniden oluşturmaz.
GAME, dil ve segmentasyon kontrollerini ortaya çıkarır. ROSVOT'nun serbest bırakılan kontrol noktası esas olarak Mandarin şarkı söyleme eğitimi alıyor.
Karşılaştırma dört ayrı dönüştürme çalıştırır ve dört bağımsız MIDI dosyası üretir; modellerin sonuçlarını birleştirmez.

Bu alandaki modeller

3 sonuç

Burada ve diğer hizmetlerde kullanılan modellerin herkese açık test sonuçlarını içerir. Varsayılan olarak kaynaktaki tam tablo gösterilir; karşılaştırmak için koşullar ve ölçütler de seçilebilir. Farklı test koşullarındaki puanlar doğrudan karşılaştırılamaz.

Yalnızca herkese açık çıkarım uygulaması ve eşleşen ağırlıkları doğrulanmış kayıtlar ile ağırlık gerektirmeyen algoritmalar gösterilir. Kapalı hizmetler, yayımlanmamış ağırlıklar ve eşleşmeyen deney sürümleri dışarıda bırakılır. Bu, tüm modellerin genel sıralaması değildir.

Herkese açık ağırlıklar, eksiksiz bir açık kaynak lisansını doğrulamaz. Beyan edilen ağırlık lisanslarını ve erişim koşullarını görmek için verileri genişletin. Beyan edilmemiş lisanslar ayrıca işaretlenir.

Karşılaştırma testiSıralama kategorisi

Seçilen model için doğrulanmış ve eşleşen açık bir sonuç olmadığından sıralama verilmedi.

GAME 1.0 · Temiz vokal

Her modelin tüm ölçümlerini görmek için bir veri kümesi seçin. Satırlar resmî sıraya veya seçilen ölçüme göre sıralanır. Kalın yazı, eşitlikler dâhil her sütundaki karşılaştırılabilir en iyi değeri gösterir. Farklı değerlendirme protokolleri ayrı sıralanır; eksik puanlar - ile gösterilir.

Yazarların özel verileri, ayrılmış 100 kayıt; her boyut raporlanan en iyi K değerini kullanır. OA genel kare doğruluğudur, nota F1 değildir ve ROSVOT ile birleştirilemez.

Ölçüte göre sırala

GAME 1.0 · Temiz vokal
Ölçüme göre sıra	Model	Bu protokol içindeki genel sıralama↑OA (%)	QER (%)↓	Presence F1 (%)↑	RPA (%)↑	Pitch RMSE↓	Chamfer (frames)↓
1	GAME 1.0 Medium · K=8 Açık ağırlıklar · Çıkarım kodu Açık ağırlıklar Çıkarım kodu`GAME-1.0.3-medium-onnx.zip`Ağırlık lisansı (depo beyanı): MIT	95.03	12.3	99.23	94.86	0.552	1.44
1	GAME 1.0 Large · K=1 Açık ağırlıklar · Çıkarım kodu Açık ağırlıklar Çıkarım kodu`GAME-1.0.3-large-onnx.zip`Ağırlık lisansı (depo beyanı): MIT	95.03	12.87	99.15	94.92	0.684	1.44
3	GAME 1.0 Small · K=2 Açık ağırlıklar · Çıkarım kodu Açık ağırlıklar Çıkarım kodu`GAME-1.0.3-small-onnx.zip`Ağırlık lisansı (depo beyanı): MIT	94.99	13.13	99.14	94.99	0.653	1.5

Özgün kayıtlar (3)

GAME · Technical Report §10 ↗Kontrol: 2026-09-27

Tüm değerlendirme kaynakları (1)

Veri kümeleri, sürümler ve koşullar ayrı tutulur; uygun sıralama satırı olmayan kaynaklar da kalır.

ROSVOT paper, Table 1 ↗
Dağıtılabilir 2 / kaynak satırı 10
Sıralama dışında: 8
Bu deneyler için tam bir açık çıkarım paketi doğrulanmadı. Aynı adlı modelin farklı ağırlıkları yerine kullanılamaz.
TONY · VOCANO · MusicYOLO · Yong et al. (2023) · ℳ (conformer) · ℳ (conv) · ℳ (w/o wbd) · ℳ (w/o noise)

Tüm özgün sonuçlar ve kaynaklar

Puanlar belirtilen veri kümesi, ölçüt ve model sürümü için geçerlidir; farklı testler doğrudan karşılaştırılamaz.

ROSVOT paper, Table 1

Dağıtılabilir 2 / kaynak satırı 10

Sıralama dışında: 8

Bu deneyler için tam bir açık çıkarım paketi doğrulanmadı. Aynı adlı modelin farklı ağırlıkları yerine kullanılamaz.

TONY · VOCANO · MusicYOLO · Yong et al. (2023) · ℳ (conformer) · ℳ (conv) · ℳ (w/o wbd) · ℳ (w/o noise)

Gürültülü ya da eşlik sızıntılı şarkılar için dayanıklı yol; mevcut resmî kontrol noktası ağırlıklı olarak Mandarin şarkılarıyla eğitilmiştir.

Ölçüte göre sırala

ROSVOT paper, Table 1
Ölçüme göre sıra	Model	COn (F) ↑		COff (F) ↑		COnPOff (F) ↑		Pitch (AOR) ↑		Melody (RPA) ↑
Ölçüme göre sıra	Model	clean	noisy	clean	noisy	clean	noisy	clean	noisy	clean	noisy
1	ℳ (ours) Açık ağırlıklar · Çıkarım kodu checkpoints.zip · rosvot + rwbd + rmvpe Çıkarım koduAğırlık lisansı beyan edilmemiş	94.0	93.8	94.5	94.4	77.4	77.0	97.0	97.1	87.6	87.4
2	ℳ (w/ E W ) Açık ağırlıklar · Çıkarım kodu checkpoints.zip · rosvot + rwbd + rmvpe Çıkarım koduAğırlık lisansı beyan edilmemiş	93.3	93.5	93.2	92.9	77.1	77.0	96.5	96.2	87.5	87.2

Özgün kayıtlar (2)

ROSVOT paper, Table 1 ↗Kontrol: 2026-10-25