Beat This!: DBN bitmeden beat takibi

MÜZİK BİLGİSİ ERİŞİMİ / TEKNİK NOT

Vuruş takibi, nabzın ne zaman oluştuğunu sorar. Nota transkripsiyonu, hangi çalgının hangi perdeyi çaldığını sorar. Beat This! ilk sorunu çözer ve daha önce dinamik Bayesçi son işlemeye bırakılan yapının büyük bölümünü öğrenilen sekans modeline taşır.

Çıktı, iki olay zaman çizgisidir. BPM, aralarındaki zaman aralıklarından türetilen bir istatistiktir; modelin tek tahmini değildir.

Kaymaya toleranslı gözetim

İnsanların vuruş açıklamaları örnek hassasiyetinde uyuşmaz. Hedef darbeler y_t ve kare olasılıkları p_t kullanıldığında, sıradan kare bazlı BCE yalnızca birkaç kare kaymış, müzikal açıdan geçerli bir tahmini cezalandırır. Kaymaya toleranslı hedefin özlü bir gösterimi şöyledir:

L_shift = min_{δ∈[-k,k]} BCE(p_t, y_{t+δ})

Tolerans eğitime aittir; sonradan ızgaraya kilitleme işlemi değildir. Vuruş ve ölçü başı kafaları sekans temsilini paylaşır, ancak daha seyrek ölçü başları yine de kendi karar yollarını gerektirir.

DBN'i ana yolun dışına taşımak

Klasik sistemler tempo sürekliliğini ve ölçü geçişlerini dayatmak için DBN kullanır. Beat This!, ana modelin veri kümesine göre ayarlanmış bu aşama olmadan kararlı vuruş ve ölçü başı sekansları üretebildiğini gösterir. Saniye cinsinden vuruş olayları, ölçü başları ve aralıklardan türetilen BPM üç ayrı çıktı olarak kalır.

Yeniden üretilebilir kabul

Resmî final0.ckpt SHA-256 ile sabitlenmiştir ve görevler çevrimdışı çalışır. Nihai modeller eğitim sırasında birkaç açık vuruş veri kümesini gördüğünden, bu kümelerdeki puanlar iyimser olabilir. Bu yüzden kabul süreci gerçek ve eksiksiz bir şarkı içerir; DAW ızgaraları, dilimleme ve sonraki MIDI nicemlemesi için ham zamanlama tablosunu dışa aktarır.

Transkripsiyon yöntemleri nasıl gelişti?

Vuruş takibi geleneksel olarak etkinleşmeleri bir sinir ağıyla tahmin eder ve sekansı dinamik Bayesçi ağa seçtirir. Beat This, kararlı vuruşları ve ölçü başlarını doğrudan üretmek için daha güçlü sekans modelleme ve kaymaya toleranslı gözetim kullanarak DBN'i varsayılan yolun dışına taşır.

Son işlemenin kaldırılması, müzikal ön kabulleri ortadan kaldırmaz. Ölçü, tempo aralığı ve açıklama tarzı verilerde kalır. ISMIR sonuçları veri kümesine ve metriğe göre okunmalıdır; rubato, davulsuz bölümler ve bileşik ölçüler nadir, zorlu durumlar olmaya devam eder.

Kaymaya toleranslı kayıp açıklama sınırlarını işler

L_shift=min_{|δ|≤Δ} BCE(ŷ_t,y_{t+δ})

δizin verilen küçük kare kayması
Δaçıklama tolerans penceresi
BCEetkinleşmeler üzerinde ikili çapraz entropi

İnsanların vuruş açıklamaları birkaç kare farklılık gösterebilir. Kaymaya toleranslı gözetim küçük bir hizalama penceresinde arama yapar ve şarkı düzeyinde keyfî kaymaya izin vermeden açıklama titreşiminin cezasını azaltır.

Vuruşlar, ölçü başları, BPM ve MIDI notaları farklı çıktılardır. Yarım veya çift tempo, eksik ölçüyle başlayan girişler ve davulsuz bölümleri incelemek için tahminleri dalga biçimi ve ölçü ızgarasının üzerine yerleştirin.

Makale, kod ve ağırlıklar Beat This kaynak kodu ve ağırlıkları / ISMIR 2024 makalesi üzerinden izlenebilir.

Yalnızca olay tanımları eşleştikten sonra karşılaştırın

Her satır kendi kaynağındaki mimariyi, metriği veya görev tanımını korur; ortak bir protokolü olmayan sonuçlar ayrı tutulur.

Model	Mimari veya kanıt	Kapsam
DBN'siz Beat This	uçtan uca vuruşlar ve ölçü başları	varsayılan yol ve uzun süreli kararlılık
isteğe bağlı son işlemeli Beat This	özel tempo kısıtlamaları	gizli değişiklikleri önlemek için parametreleri kaydedin
etkinleşme artı DBN	açık tempo/geçiş ön kabulü	sağlamdır, ancak yanlış tempoya kilitlenebilir

Nota olaylarını dinleyerek inceleme

Yarım veya çift tempo, eksik ölçüyle başlayan girişler, tempo değişiklikleri ve davulsuz bölümleri incelemek için tahminleri dalga biçimi ve ölçü ızgarasının üzerine yerleştirin. Ortalama F-ölçüsü, bir vuruş kaymış bütün bir şarkıyı gizleyebilir.

Kaymaya toleranslı kayıp, açıklama sınırının yakınında anlamlı gradyanlar verir; zaman damgalarının keyfî kaymasına izin vermez.

MIDI'nin korumadığı müzik bilgileri

Vuruş zamanları eksiksiz bir nota yazımı değildir. Bölütleme, groove, swing oranı ve ölçü değişiklikleri daha üst düzey analiz gerektirir.

Veri kümeleri farklı pencereler, süreklilik kuralları ve ölçü başı ağırlıkları kullanır; bu nedenle sıralamalar protokol adını korumalıdır.

Beat This kaynak kodu ve ağırlıkları için makaleler ve açık dosyalar

Model adları, sayılar ve sınırlamalar aşağıdaki makalelere, depolara veya model kartlarına dayanır.