Đang tải...

Chép giọng hát theo lời · STARS · TelkNet

MIDI / phiên âmGPU khối lượng công việcSTARS · Mã nguồn STARS · Trọng số STARS · Trọng số STARS · Chinese · Bài báo

Chép giọng hát theo lời

Cần âm thanh giọng hát, lời, âm vị và ánh xạ âm vị-sang-từ. Xuất MIDI, thời gian âm vị/từ và kỹ thuật thanh nhạc; không thể chạy chỉ với âm thanh.

25 tín dụng/sử dụngĐầu vào tệpTối đa 100 MBƯớc tính 60-2400 giây

Đầu vào

Hỗ trợ đầu vào ở các định dạng như mp3 / wav / flac / ogg / m4a / aac / aif / aiff / mp4 / mov / mkv

Các định dạng được hỗ trợ

mp3wavflacoggm4aaacaifaiffmp4movmkv

Đầu ra

MIDI / JSON

Trường hợp sử dụng

Chỉnh sửa nốt nhạc, phối khí và chi tiết biểu diễn.

Chọn họ mô hình

Chép giọng hát theo lời · STARSCó sẵnChép nốt và thời gian lời từ giọng, lời hát, âm vị; chọn theo ngôn ngữ lời.

Chọn phiên bản hoặc chế độ xử lý

Chép giọng hát theo lời · STARS · ChineseChép giọng hát theo lời tiếng Trung, trích nốt và căn thời gian lời hát.Đề xuấtCó sẵnChép giọng hát theo lời · STARS · BilingualChép theo lời tiếng Trung, tiếng Anh hoặc pha trộn, trích nốt và căn thời gian.Có sẵn

Chọn mô hình phù hợp với tư liệu và mục đích, rồi xem ví dụ trước khi gửi.

Chi phí, thời gian, định dạng và tham số phụ thuộc mô hình đã chọn.

Mô hình, thông số và nguồn

STARS · Chinese: Chỉnh sửa nốt nhạc, phối khí và chi tiết biểu diễn.

STARS · ChineseSTARS paper, Table 2STARS ChineseROSVOTVOCANOSTARS paper, Table 4STARS BilingualSTARS: A Unified Framework for Singing Transcription, Alignment, and Refined Style AnnotationSTARS · Bilingual

STARS · Chinese

STARS source (pinned)STARS weights (pinned)STARS paper

Nhập mảng JSON hoặc các từ cách nhau bằng dấu cách. Văn bản tiếng Trung liền nhau sẽ tách theo ký tự.
Nhập mảng JSON hoặc âm vị cách nhau bằng dấu cách/dấu phẩy theo bộ âm vị STARS đã chọn.
Nhập một chỉ số từ bắt đầu từ 0 cho mỗi âm vị; số chỉ số phải bằng số âm vị.

STARS · Bilingual

STARS · Bilingual: Chỉnh sửa nốt nhạc, phối khí và chi tiết biểu diễn.

STARS source (pinned)STARS weights (pinned)STARS paper

Nhập mảng JSON hoặc các từ cách nhau bằng dấu cách. Văn bản tiếng Trung liền nhau sẽ tách theo ký tự.
Nhập mảng JSON hoặc âm vị cách nhau bằng dấu cách/dấu phẩy theo bộ âm vị STARS đã chọn.
Nhập một chỉ số từ bắt đầu từ 0 cho mỗi âm vị; số chỉ số phải bằng số âm vị.

Giấy tờ và ghi chú điểm chuẩn

STARS: A Unified Framework for Singing Transcription, Alignment, and Refined Style Annotation

ACL Findings - 2025

Paper Project demo

Chính thức / kho lưu trữ

STARS source (pinned)STARS weights (pinned)

Giấy tờ/ghi chú kỹ thuật

STARS paper

Hướng dẫn tham số

Nhập mảng JSON hoặc các từ cách nhau bằng dấu cách. Văn bản tiếng Trung liền nhau sẽ tách theo ký tự.
Nhập mảng JSON hoặc âm vị cách nhau bằng dấu cách/dấu phẩy theo bộ âm vị STARS đã chọn.
Nhập một chỉ số từ bắt đầu từ 0 cho mỗi âm vị; số chỉ số phải bằng số âm vị.

Quy trình làm việc

1Tải giọng hát, nhập lời, âm vị và chỉ số âm vị–từ.
2STARS tạo MIDI và chú giải căn chỉnh; kiểm tra thời gian nốt và lời.

Điểm cần kiểm tra

Nhập mảng JSON hoặc các từ cách nhau bằng dấu cách. Văn bản tiếng Trung liền nhau sẽ tách theo ký tự.
Nhập mảng JSON hoặc âm vị cách nhau bằng dấu cách/dấu phẩy theo bộ âm vị STARS đã chọn.
Nhập một chỉ số từ bắt đầu từ 0 cho mỗi âm vị; số chỉ số phải bằng số âm vị.

Các mô hình trong lĩnh vực

3 kết quả

Bao gồm kết quả kiểm thử công khai của các mô hình được dùng tại đây và nơi khác. Mặc định hiển thị bảng nguồn đầy đủ; cũng có thể chọn điều kiện và chỉ số để so sánh. Không thể so sánh trực tiếp điểm số giữa các điều kiện kiểm thử khác nhau.

Chỉ hiển thị bản ghi đã xác minh có mã suy luận công khai và trọng số đúng phiên bản thử nghiệm, cùng các thuật toán không cần trọng số. Dịch vụ đóng, trọng số chưa công bố và phiên bản thử nghiệm chưa đối chiếu được sẽ bị loại. Đây không phải bảng xếp hạng của tất cả mô hình.

Trọng số công khai không chứng minh có giấy phép mã nguồn mở đầy đủ. Mở rộng dữ liệu để xem giấy phép trọng số được công bố và điều kiện truy cập. Giấy phép chưa công bố được đánh dấu riêng.

Bộ kiểm thửHạng mục xếp hạng

STARS paper, Table 2

Chọn một bộ dữ liệu để xem mọi chỉ số của từng mô hình. Các hàng được sắp theo thứ hạng chính thức hoặc chỉ số đã chọn. Chữ đậm đánh dấu giá trị tốt nhất có thể so sánh trong mỗi cột, kể cả đồng hạng. Các quy trình đánh giá khác nhau được xếp hạng riêng; điểm còn thiếu được hiển thị bằng -.

Triển khai được 3 / dòng nguồn 3

Các giá trị lấy từ nguồn công khai được liên kết. Nhãn hàng cho biết tập kiểm thử hoặc checkpoint; điểm chưa được công bố được hiển thị bằng -.

Xếp hạng theo chỉ số

STARS paper, Table 2
Hạng theo chỉ số	Mô hình	COnPOff(F) ↑	RPA ↑
1	STARS (ours)Mô hình dùng tại đây Trọng số công khai · Mã suy luận stars_chinese/model_ckpt_steps_200000.ckpt Mã suy luậnChưa công bố giấy phép trọng số	71.0	86.7
2	ROSVOT Trọng số công khai · Mã suy luận checkpoints.zip · rosvot + rwbd + rmvpe Mã suy luậnChưa công bố giấy phép trọng số	70.2	83.8
3	VOCANO Trọng số công khai · Mã suy luận VOCANO segmentation Patch-CNN pitch Mã suy luận`model.pt`Chưa công bố giấy phép trọng số	50.2	76.6

Bản ghi gốc (3)

Nhãn cho biết mô hình hoặc thành phần được dùng tại đây. Điểm số và thiết lập lấy từ các thử nghiệm được dẫn nguồn, không phải kết quả đánh giá lại toàn bộ quy trình của trang.

STARS paper, Table 2 ↗Đã kiểm tra: 2026-10-25

Tất cả nguồn đánh giá (2)

Tách riêng bộ dữ liệu, phiên bản và điều kiện, kể cả nguồn chưa có dòng đủ điều kiện xếp hạng.

STARS paper, Table 2 ↗
Triển khai được 3 / dòng nguồn 3
STARS paper, Table 4 ↗
Triển khai được 2 / dòng nguồn 6
Không xếp hạng: 4
Chưa xác minh gói suy luận công khai đầy đủ cho các thử nghiệm này. Trọng số khác cùng tên mô hình không thể thay thế.
w/o CTC · w/o VQ · w/o MOE · Conv

Toàn bộ kết quả gốc và nguồn

Điểm số áp dụng cho bộ dữ liệu, chỉ số và phiên bản được nêu; không thể so sánh trực tiếp các phép thử khác nhau.

STARS paper, Table 2

Triển khai được 3 / dòng nguồn 3

Các giá trị lấy từ nguồn công khai được liên kết. Nhãn hàng cho biết tập kiểm thử hoặc checkpoint; điểm chưa được công bố được hiển thị bằng -.

Xếp hạng theo chỉ số

STARS paper, Table 2
Hạng theo chỉ số	Mô hình	COnPOff(F) ↑	RPA ↑
1	STARS (ours) Trọng số công khai · Mã suy luận stars_chinese/model_ckpt_steps_200000.ckpt Mã suy luậnChưa công bố giấy phép trọng số	71.0	86.7
2	ROSVOT Trọng số công khai · Mã suy luận checkpoints.zip · rosvot + rwbd + rmvpe Mã suy luậnChưa công bố giấy phép trọng số	70.2	83.8
3	VOCANO Trọng số công khai · Mã suy luận VOCANO segmentation Patch-CNN pitch Mã suy luận`model.pt`Chưa công bố giấy phép trọng số	50.2	76.6

Bản ghi gốc (3)

STARS paper, Table 2 ↗Đã kiểm tra: 2026-10-25

STARS paper, Table 4

Triển khai được 2 / dòng nguồn 6

Không xếp hạng: 4

Chưa xác minh gói suy luận công khai đầy đủ cho các thử nghiệm này. Trọng số khác cùng tên mô hình không thể thay thế.

w/o CTC · w/o VQ · w/o MOE · Conv

Các giá trị lấy từ nguồn công khai được liên kết. Nhãn hàng cho biết tập kiểm thử hoặc checkpoint; điểm chưa được công bố được hiển thị bằng -.

Xếp hạng theo chỉ số

STARS paper, Table 4
Hạng theo chỉ số	Mô hình	BER ↓	IOU ↑	COnPOff(F) ↑	RPA ↑	T-F1 ↑	T-ACC ↑	S-ACC ↑
1	STARS Trọng số công khai · Mã suy luận stars_chinese/model_ckpt_steps_200000.ckpt Mã suy luậnChưa công bố giấy phép trọng số	18.6	80.9	71.0	86.7	79.9	91.5	68.0
2	Bilingual Trọng số công khai · Mã suy luận stars_chinese_english_bilingual/model_ckpt_steps_300000.ckpt Mã suy luậnChưa công bố giấy phép trọng số	19.4	75.6	68.1	86.2	76.8	91.4	70.4

Bản ghi gốc (2)

STARS paper, Table 4 ↗Đã kiểm tra: 2026-10-25

Chép giọng hát theo lời

Mô hình, thông số và nguồn

STARS · Chinese

STARS · Bilingual

Giấy tờ và ghi chú điểm chuẩn

STARS: A Unified Framework for Singing Transcription, Alignment, and Refined Style Annotation

Chính thức / kho lưu trữ

Giấy tờ/ghi chú kỹ thuật

Hướng dẫn tham số

Quy trình làm việc

Điểm cần kiểm tra

Các mô hình trong lĩnh vực

STARS paper, Table 2

STARS paper, Table 2

STARS paper, Table 4

Phản hồi nhanh