Enhanced Automatic Drum Transcription via Drum Stem Source Separation
arXiv - 2025
Yükleniyor...
ADTOF Plus · ADTOF Direct · ADT_STR · MSG-LD. Tam miks önce seçilen modelin sürecinde davul ayırmadan geçer. Ayrılmış davullar doğrudan seçilen transkripsiyon veya ayırma modeline gönderilir.
Giriş
Girişleri mp3 / wav / flac / ogg / m4a / aac / aif / aiff / mp4 / mov / mkv gibi formatlarda destekler
Desteklenen formatlar
Çıktı
MIDI
Kullanım Durumu
Notaları, enstrümantasyonu ve icra ayrıntılarını düzenleyin.
Malzemenize ve amacınıza uygun modeli seçin, göndermeden önce örnekleri inceleyin.
Ücret, süre, biçimler ve parametreler seçilen modele bağlıdır.
Geri bildiriminizde araç adını, adımları ve sorunu belirtin. Ekran görüntüleri sorunu bulmamıza yardımcı olabilir.
ADT_STR 26 davul sınıfının başlangıçlarını ve vuruş şiddetlerini algılar, MIDI üretir.
MSG-LD beş davul kanalı üretip başlangıçları algılar; MIDI vuruş şiddeti 100, sabit çalma süresi 0,1 saniyedir.
MSG-LD beş davul kanalı üretip başlangıçları algılar; MIDI vuruş şiddeti 100, sabit çalma süresi 0,1 saniyedir.
ADTOF Plus, ADTOF’a davul ayırma, vuruş şiddeti eşleme ve açık/kapalı hi-hat işleme ekler; tam miks kabul eder.
ADTOF Direct, ayrılmış davulları PyTorch ADTOF ile transkribe eder. Tam mikste TelkNet önce AudioSep-Hive ile davulları ayırır; Plus’ın vuruş şiddeti ve açık/kapalı hi-hat son işlemlerini uygulamaz.
arXiv - 2025
ISMIR - 2021
Signals - 2023
Burada ve diğer hizmetlerde kullanılan modellerin herkese açık test sonuçlarını içerir. Varsayılan olarak kaynaktaki tam tablo gösterilir; karşılaştırmak için koşullar ve ölçütler de seçilebilir. Farklı test koşullarındaki puanlar doğrudan karşılaştırılamaz.
Yalnızca herkese açık çıkarım uygulaması ve eşleşen ağırlıkları doğrulanmış kayıtlar ile ağırlık gerektirmeyen algoritmalar gösterilir. Kapalı hizmetler, yayımlanmamış ağırlıklar ve eşleşmeyen deney sürümleri dışarıda bırakılır. Bu, tüm modellerin genel sıralaması değildir.
Herkese açık ağırlıklar, eksiksiz bir açık kaynak lisansını doğrulamaz. Beyan edilen ağırlık lisanslarını ve erişim koşullarını görmek için verileri genişletin. Beyan edilmemiş lisanslar ayrıca işaretlenir.
Her modelin tüm ölçümlerini görmek için bir veri kümesi seçin. Satırlar resmî sıraya veya seçilen ölçüme göre sıralanır. Kalın yazı, eşitlikler dâhil her sütundaki karşılaştırılabilir en iyi değeri gösterir. Farklı değerlendirme protokolleri ayrı sıralanır; eksik puanlar - ile gösterilir.
ADT-STR README önerisi sonuç grafiğiyle çelişiyor. Bu sıralama resmî grafikte belirtilen değerleri kullanır.
| Ölçüme göre sıra | Model | ENST↑F1 % | MDB↑F1 % |
|---|---|---|---|
| 1 | ADT-STR · τ=0.4Açık ağırlıklar · Çıkarım kodu | 60 | 71 |
| 2 | ADT-STR · τ=0.6Sitede kullanılan modelAçık ağırlıklar · Çıkarım kodu | 58 | 65 |
| 3 | ADT-STR · τ=0.8Açık ağırlıklar · Çıkarım kodu | 52 | 61 |
İşaretler burada kullanılan modelleri veya bileşenleri gösterir. Puanlar ve ayarlar, sitenin tüm işlem zincirinin yeni bir değerlendirmesinden değil, belirtilen testlerden alınmıştır.
Veri kümeleri, sürümler ve koşullar ayrı tutulur; uygun sıralama satırı olmayan kaynaklar da kalır.
Dağıtılabilir 2 / kaynak satırı 2
Dağıtılabilir 6 / kaynak satırı 6
Dağıtılabilir 3 / kaynak satırı 6
Bu deneyler için tam bir açık çıkarım paketi doğrulanmadı. Aynı adlı modelin farklı ağırlıkları yerine kullanılamaz.
Vogl et al. 8-class baseline · MDB · 8-class evaluation · onset only · 50 ms · Vogl et al. 8-class baseline · RBMA · 8-class evaluation · onset only · 50 ms · Vogl et al. 8-class baseline · ENST · 8-class evaluation · onset only · 50 ms
Dağıtılabilir 0 / kaynak satırı 8
Bu deneyler için tam bir açık çıkarım paketi doğrulanmadı. Aynı adlı modelin farklı ağırlıkları yerine kullanılamaz.
Setting-1 · ENST · Setting-2 · ENST · Setting-3 · ENST · Setting-4 · ENST · Setting-1 · MDB · Setting-2 · MDB · Setting-3 · MDB · Setting-4 · MDB
Dağıtılabilir 2 / kaynak satırı 3
Bu deneyler için tam bir açık çıkarım paketi doğrulanmadı. Aynı adlı modelin farklı ağırlıkları yerine kullanılamaz.
LarsNet
Dağıtılabilir 2 / kaynak satırı 4
Bu deneyler için tam bir açık çıkarım paketi doğrulanmadı. Aynı adlı modelin farklı ağırlıkları yerine kullanılamaz.
MSG-LD Vanilla · MSG-LD TB
Puanlar belirtilen veri kümesi, ölçüt ve model sürümü için geçerlidir; farklı testler doğrudan karşılaştırılamaz.
Tabloda yalnızca açık ağırlıkları veya yapılandırmaları bulunan ve yerel olarak çalıştırılabilen modeller yer alır.
Her modelin tüm ölçümlerini görmek için bir veri kümesi seçin. Satırlar resmî sıraya veya seçilen ölçüme göre sıralanır. Kalın yazı, eşitlikler dâhil her sütundaki karşılaştırılabilir en iyi değeri gösterir. Farklı değerlendirme protokolleri ayrı sıralanır; eksik puanlar - ile gösterilir.
Dağıtılabilir 2 / kaynak satırı 2
ADTOF-PyTorch README · PyTorch 88.51 · Keras 88.74
| Ölçüme göre sıra | Model | Recall↑ | Precision↑ | F-measure↑ |
|---|---|---|---|---|
| 1 | ADTOF (original)Açık ağırlıklar · Çıkarım kodu | 88.68 | 89.90 | 88.74 |
| 2 | ADTOF-pytorchAçık ağırlıklar · Çıkarım kodusrc/adtof_pytorch/data/adtof_frame_rnn_pytorch_weights.pthÇıkarım koduAğırlık lisansı beyan edilmemiş | 88.26 | 89.83 | 88.51 |
Her modelin tüm ölçümlerini görmek için bir veri kümesi seçin. Satırlar resmî sıraya veya seçilen ölçüme göre sıralanır. Kalın yazı, eşitlikler dâhil her sütundaki karşılaştırılabilir en iyi değeri gösterir. Farklı değerlendirme protokolleri ayrı sıralanır; eksik puanlar - ile gösterilir.
Değerler, bağlantısı verilen herkese açık kaynaktan alınır. Satır etiketleri test kümesini veya kontrol noktasını belirtir; bildirilmeyen puanlar - olarak gösterilir.
| Ölçüme göre sıra | Model | Test koşulu | F1 %↑ | Hassasiyet %'si↑ | %'yi geri çağır↑ |
|---|---|---|---|---|---|
| 1 | ADTOF PlusAçık ağırlıklar · Çıkarım koduMDX23C 5-stemMDX23C full-mix drumsADTOF PyTorchÇıkarım kodu drumsep_5stems_mdx23c_jarredou.ckptAğırlık lisansı (depo beyanı): mit | MDB · 5 classes · onset only · 50 ms | 89 | 89 | 89 |
| 2 | Original ADTOFAçık ağırlıklar · Çıkarım kodu | MDB · 5 classes · onset only · 50 ms | 87 | - | - |
Her modelin tüm ölçümlerini görmek için bir veri kümesi seçin. Satırlar resmî sıraya veya seçilen ölçüme göre sıralanır. Kalın yazı, eşitlikler dâhil her sütundaki karşılaştırılabilir en iyi değeri gösterir. Farklı değerlendirme protokolleri ayrı sıralanır; eksik puanlar - ile gösterilir.
Değerler, bağlantısı verilen herkese açık kaynaktan alınır. Satır etiketleri test kümesini veya kontrol noktasını belirtir; bildirilmeyen puanlar - olarak gösterilir.
| Ölçüme göre sıra | Model | Test koşulu | F1 %↑ | Hassasiyet %'si↑ | %'yi geri çağır↑ |
|---|---|---|---|---|---|
| - | ADTOF PlusAçık ağırlıklar · Çıkarım koduMDX23C 5-stemMDX23C full-mix drumsADTOF PyTorchÇıkarım kodu drumsep_5stems_mdx23c_jarredou.ckptAğırlık lisansı (depo beyanı): mit | MDB · 8-class evaluation · onset only · 50 ms | 84 | 84 | 84 |
Her modelin tüm ölçümlerini görmek için bir veri kümesi seçin. Satırlar resmî sıraya veya seçilen ölçüme göre sıralanır. Kalın yazı, eşitlikler dâhil her sütundaki karşılaştırılabilir en iyi değeri gösterir. Farklı değerlendirme protokolleri ayrı sıralanır; eksik puanlar - ile gösterilir.
Dağıtılabilir 2 / kaynak satırı 3
Bu deneyler için tam bir açık çıkarım paketi doğrulanmadı. Aynı adlı modelin farklı ağırlıkları yerine kullanılamaz.
LarsNet
Makale OB, TB ve OBTB'yi ayrı değerlendirir; OB puanları varsayılan OBTB'ye ait değildir. Nota F1 ile ses mel-MSE/FAD ayrı tablolardadır. Makaledeki tespit hattı burada yeniden ölçülmemiştir.
| Ölçüme göre sıra | Model | MDB · Kick | MDB · Snare | MDB · Toms | MDB · Hi-Hats | MDB · Cymbals | MDB · Overall | ENST · Kick | ENST · Snare | ENST · Toms | ENST · Hi-Hats | ENST · Cymbals | ENST · Overall | ||||||||||||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | ||
| 1 | ADTOFAçık ağırlıklar · Çıkarım kodu | 0.851 | 0.790 | 0.923 | 0.752 | 0.828 | 0.690 | 0.520 | 0.520 | 0.520 | 0.773 | 0.859 | 0.703 | 0.849 | 0.802 | 0.902 | 0.795 | 0.813 | 0.778 | 0.795 | 0.984 | 0.667 | 0.599 | 0.932 | 0.441 | 0.581 | 0.669 | 0.513 | 0.777 | 0.936 | 0.663 | 0.657 | 0.788 | 0.563 | 0.709 | 0.908 | 0.582 |
| 2 | MSG-LD OBAçık ağırlıklar · Çıkarım kodu | 0.931 | 0.939 | 0.923 | 0.760 | 0.791 | 0.732 | 0.268 | 0.309 | 0.236 | 0.650 | 0.550 | 0.794 | 0.481 | 0.663 | 0.377 | 0.707 | 0.709 | 0.704 | 0.821 | 0.941 | 0.729 | 0.642 | 0.698 | 0.594 | 0.491 | 0.415 | 0.602 | 0.630 | 0.643 | 0.618 | 0.391 | 0.611 | 0.287 | 0.640 | 0.695 | 0.593 |
Her modelin tüm ölçümlerini görmek için bir veri kümesi seçin. Satırlar resmî sıraya veya seçilen ölçüme göre sıralanır. Kalın yazı, eşitlikler dâhil her sütundaki karşılaştırılabilir en iyi değeri gösterir. Farklı değerlendirme protokolleri ayrı sıralanır; eksik puanlar - ile gösterilir.
Dağıtılabilir 2 / kaynak satırı 4
Bu deneyler için tam bir açık çıkarım paketi doğrulanmadı. Aynı adlı modelin farklı ağırlıkları yerine kullanılamaz.
MSG-LD Vanilla · MSG-LD TB
Makale OB, TB ve OBTB'yi ayrı değerlendirir; OB puanları varsayılan OBTB'ye ait değildir. Nota F1 ile ses mel-MSE/FAD ayrı tablolardadır. Makaledeki tespit hattı burada yeniden ölçülmemiştir.
| Ölçüme göre sıra | Model | MDB Overall | ENST Overall | Mean overall F1 (2 sets) | ||||||
|---|---|---|---|---|---|---|---|---|---|---|
| F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | F1↑ | P↑ | R↑ | ||
| 1 | MSG-LD OBAçık ağırlıklar · Çıkarım kodu | 0.707 | 0.709 | 0.704 | 0.640 | 0.695 | 0.593 | 0.674 | 0.674 | 0.674 |
| 2 | MSG-LD OBTBAçık ağırlıklar · Çıkarım kodu | 0.690 | 0.709 | 0.672 | 0.636 | 0.703 | 0.580 | 0.663 | 0.663 | 0.663 |