HuBERT: Self-Supervised Speech Representation Learning
IEEE/ACM TASLP - 2021
HuBERT는 RVC 계열 voice conversion pipeline에 쓰이는 자기지도 음성 표현을 제공합니다.
음색 변환, 커버 demo, 캐릭터 보이스 실험을 하는 사용자
변환 보컬, 원본 보컬 참조, 다운로드 가능한 오디오를 demo와 청취 테스트에 활용합니다
입력
깨끗한 보컬, 커버 소재, 분리된 보컬 stem을 RVC v2 음색 변환 체인으로 처리합니다
오디오 형식
출력
변환 보컬, 원본 보컬 참조, 다운로드 가능한 오디오를 demo와 청취 테스트에 활용합니다
가장 적합
음색 변환, 커버 demo, 캐릭터 보이스 실험을 하는 사용자
AI 커버 파이프라인은 분리, RVC 음성 변환 및 믹스다운을 결합합니다. 핵심 입력은 보컬 파일과 대상 음성 모델입니다.
RVC v2는 입력된 보컬 음색을 선택한 캐릭터 음성 모델로 변환합니다.
RMVPE는 RVC 경로와 hybrid F0 옵션에 쓰이는 강인한 보컬 피치 추정기입니다.
AI 커버 파이프라인은 변환 및 믹스다운 전에 보컬/반주를 분리합니다.
IEEE/ACM TASLP - 2021
HuBERT는 RVC 계열 voice conversion pipeline에 쓰이는 자기지도 음성 표현을 제공합니다.
Interspeech - 2023
RMVPE는 다성 음악용 Interspeech 2023 강인 보컬 피치 추정기입니다.
Official repository - current
RVC project는 VITS/HuBERT retrieval-based voice conversion workflow의 공식 기술 출처입니다.