VOCANO: A Note Transcription Framework for Singing Voice in Polyphonic Music
ISMIR - 2021
載入中...
將清唱、哼唱或人聲分軌轉成 MIDI。可對照 ROSVOT、GAME、SOME 和 VOCANO 的結果,再校對旋律。
輸入
上傳清唱、哼唱或已分離的主唱。若只有完整歌曲,可選擇「完整歌曲」,系統會先提取人聲再轉寫。
支援格式
輸出
MIDI
適用場景
把唱出來的旋律放進 DAW,繼續修改音高和時值,或用作合成器引導、疊錄與製譜初稿。
按素材和用途選擇模型,查看範例後再提交。
費用、耗時、格式和參數以所選模型為準。
VOCANO 先以 Patch-CNN 提取歌聲音高,再由 PyramidNet-110 判斷音符邊界;官方推理入口沒有額外可調模型參數。
面向帶噪或伴奏殘留歌聲的穩健路線;目前官方檢查點主要使用普通話歌聲訓練。
將歌聲轉為 MIDI,可調整演唱語言、分段和音符辨識參數。
SOME 是快速、輕量的歌聲轉 MIDI 路線。
ISMIR - 2021
ACL - 2024
面向帶噪或伴奏殘留歌聲的穩健路線;目前官方檢查點主要使用普通話歌聲訓練。
Official technical guide - 2026
將歌聲轉為 MIDI,可調整演唱語言、分段和音符辨識參數。
Official technical guide - 2023
SOME 是快速、輕量的歌聲轉 MIDI 路線。
包含本站與站外的公開測試結果。預設顯示來源完整表,也可切換條件和指標比較;不同測試條件的分數不能直接比較。
僅顯示已核實公開推論實作及對應權重的紀錄(無需權重的演算法除外)。封閉服務、未公開權重或無法匹配實驗版本的紀錄不入榜;這不是全領域總榜。
公開權重不等於授權完整的開源。權重授權和存取條件請見展開資料;未明確聲明的授權另行標示。
目前選擇的模型尚無可核實的對應公開成績,因此未列入排名。
切換資料集查看每個模型的完整指標。預設按官方名次或所選指標排序;粗體為相同評測口徑下的欄位最佳值,並列均標出。不同口徑不合併排名,缺分為 -。
作者私有資料、100 段保留錄音;各規模使用報告中各自最佳的 K。OA 是綜合幀準確率,不是音符 F1,不能與 ROSVOT 分數混排。
| 指標名次 | 模型 | 同條件綜合排行↑OA (%) | QER (%)↓ | Presence F1 (%)↑ | RPA (%)↑ | Pitch RMSE↓ | Chamfer (frames)↓ |
|---|---|---|---|---|---|---|---|
| 1 | GAME 1.0 Medium · K=8公開權重 · 推論程式碼 | 95.03 | 12.3 | 99.23 | 94.86 | 0.552 | 1.44 |
| 1 | GAME 1.0 Large · K=1公開權重 · 推論程式碼 | 95.03 | 12.87 | 99.15 | 94.92 | 0.684 | 1.44 |
| 3 | GAME 1.0 Small · K=2公開權重 · 推論程式碼 | 94.99 | 13.13 | 99.14 | 94.99 | 0.653 | 1.5 |
資料集、版本和條件分別列出,未納入排行的評測也保留來源。
可部署項目 2 / 原表 10
以下實驗尚未核實完整的公開推論套件;同名模型的其他權重不能替代。
TONY · VOCANO · MusicYOLO · Yong et al. (2023) · ℳ (conformer) · ℳ (conv) · ℳ (w/o wbd) · ℳ (w/o noise)
評測分數對應各自的資料集、指標和模型版本,不同測試的分數不能直接比較。
切換資料集查看每個模型的完整指標。預設按官方名次或所選指標排序;粗體為相同評測口徑下的欄位最佳值,並列均標出。不同口徑不合併排名,缺分為 -。
可部署項目 2 / 原表 10
以下實驗尚未核實完整的公開推論套件;同名模型的其他權重不能替代。
TONY · VOCANO · MusicYOLO · Yong et al. (2023) · ℳ (conformer) · ℳ (conv) · ℳ (w/o wbd) · ℳ (w/o noise)
面向帶噪或伴奏殘留歌聲的穩健路線;目前官方檢查點主要使用普通話歌聲訓練。
| 指標名次 | 模型 | COn (F) ↑ | COff (F) ↑ | COnPOff (F) ↑ | Pitch (AOR) ↑ | Melody (RPA) ↑ | |||||
|---|---|---|---|---|---|---|---|---|---|---|---|
| clean | noisy | clean | noisy | clean | noisy | clean | noisy | clean | noisy | ||
| 1 | ℳ (ours)公開權重 · 推論程式碼 | 94.0 | 93.8 | 94.5 | 94.4 | 77.4 | 77.0 | 97.0 | 97.1 | 87.6 | 87.4 |
| 2 | ℳ (w/ E W )公開權重 · 推論程式碼 | 93.3 | 93.5 | 93.2 | 92.9 | 77.1 | 77.0 | 96.5 | 96.2 | 87.5 | 87.2 |
回報時請註明工具名稱、操作步驟和遇到的問題,可附截圖協助定位。