AI covervokal · TelkNet

Stemme og vokalGPU arbeidsmengde

AI covervokal

Brukere som lager stemmefargeeksperimenter, coverdemoer eller stemmeprøver

Konvertert vokal, originale vokalreferanser og nedlastbar lyd for demoer og lyttetester

5 studiepoeng/brukLydfilinngangMaks 100 MBAnslått 180-900 sekunder

Inndata

Ren vokal, covermateriale eller adskilte vokalstammer gjennom en RVC v2 konverteringskjede

Lydformater

mp3wavflacoggm4aaac

Utgang

Konvertert vokal, originale vokalreferanser og nedlastbar lyd for demoer og lyttetester

Passer best for

Brukere som lager stemmefargeeksperimenter, coverdemoer eller stemmeprøver

Modeller, parametere og kilder

AI-dekselrørledningen kombinerer separasjon, RVC-stemmekonvertering og mixdown. Kjerneinngangene er en vokalfil og målstemmemodell.

RVC v2

RVC v2 konverterer den inngående vokale klangen til den valgte karakterstemmemodellen.

RVC Project TelkNet AI-RVC adapter HuBERT

Pipeline: kildevokal separeres, konverteres med RVC, og blandes deretter med akkompagnement.
Standard: den normale ruten følger den medfølgende AI-RVC-dekselkonfigurasjonen.
Stemmemodell: valgt karaktersjekkpunkt og indekskontrollklang.

RMVPE / hybrid F0

RMVPE gir tonehøydeekstraksjon for RVC-sangkonverteringskjeden.

RVC Project RMVPE

Pitch: estimerer F0-konturen som brukes av RVC for å bevare melodi og intonasjon.
Hybridmodus: kan kombineres med andre F0-metoder når en kilde er vanskelig.
Referansekontekst: referert gjennom pitch-estimeringslitteratur og F0-sammenligninger.

RoFormer / Karaoke / Demucs separation

AI-coverpipelinen skiller vokal/akkompagnement før konvertering og mixdown.

python-audio-separator facebookresearch/demucs MVSep algorithms Mel-Band RoFormer BS-RoFormer HT Demucs

Primær: Separasjon i RoFormer-stil forbereder ren vokal for konvertering.
Harmony: Karaoke-separasjon holder backing vokal tilgjengelig for mixdown.
Tilbakeslag: Ruter i Demucs/UVR-stil gir kontekst når kildematerialet er vanskelig.

Modellsammenligning

Modell

Rolle

Hvorfor det brukes

Utgangseffekt

ModellRVC v2

RVC Project TelkNet AI-RVC adapter HuBERT

RolleStemmekonverteringskjerne

Hvorfor det brukesBruker valgt karakterklang etter separasjon og tonehøydeekstraksjon.

UtgangseffektKonvertert vokal pluss endelig covermiks

ModellRMVPE / hybrid F0

RVC Project RMVPE

RollePrimær F0 avtrekker

Hvorfor det brukesValgt for sangvennlig tonehøydesporing i standard AI-RVC dekkkjede.

UtgangseffektPitch-kontur for RVC-konvertering

ModellRoFormer vocal_rvc ensemble

python-audio-separator MVSep algorithms Mel-Band RoFormer BS-RoFormer

RolleVokalopprydding før konvertering

Hvorfor det brukesForbedrer input gitt til RVC og bevarer harmoni-bevisste utganger for miksing.

UtgangseffektRen vokal, backing vokal og akkompagnementsstammer

ModellDemucs / UVR5 fallback

facebookresearch/demucs HT Demucs python-audio-separator

RolleTilbakeslagssikkerhetsrute

Hvorfor det brukesHolder konvertering brukbar når en modell eller ekstraktor er uegnet for kilden.

UtgangseffektTilbakestillings- eller separasjonsbaner når den foretrukne ruten ikke er tilgjengelig

Papir og benchmark notater

HuBERT: Self-Supervised Speech Representation Learning

IEEE/ACM TASLP - 2021

HuBERT leverer talerepresentasjonskontekst for RVC-stil stemmekonverteringsrørledninger.

arXiv:2106.07447

RMVPE: A Robust Model for Vocal Pitch Estimation in Polyphonic Music

Interspeech - 2023

RMVPE er en robust tonehøydeestimator som brukes i pipelines for sangstemmekonvertering.

ISCA PDF

RVC Project

Official repository - current

RVC-referanser forklarer gjenfinningsbasert stemmekonvertering og hvorfor modell-, indeks- og F0-valg påvirker utdata.

RVC WebUI

Offisielle / repositories

RVC Project TelkNet AI-RVC adapter python-audio-separator facebookresearch/demucs MVSep algorithms

Papirer / tekniske notater

HuBERT RMVPE Mel-Band RoFormer BS-RoFormer HT Demucs

Parameterguide

Stemmemodell: velger målkaraktervekter og gjenfinningsindeks.
Pitch shift: justerer kilden med halvtoner for å matche målområdet.
Indeksforhold: kontrollerer hvor mye innhentingsindeksen påvirker stemmefargen.
F0-metode: velger RMVPE, CREPE, Harvest eller en annen bane for utvinning av bek.
Separator: bruker RoFormer, UVR5 eller Demucs før konvertering.
Konverteringspipeline: standard til den medfølgende AI-RVC dekkkjeden; den offisielle 1:1-ruten kan fortsatt velges manuelt.
Mikskontroller: juster vokal, akkompagnement, romklang og original-vokalblanding.

Brukssaker

Bygg coverdemoer og karakter-stemmeprøver
Valider en stemmeretning før dypere produksjon
Mat separert vokal inn i en nedstrøms sangarbeidsflyt

Arbeidsflyt

1Foretrekker å laste opp allerede separert vokalt materiale
2Send inn konverteringsoppgaven med målstemmeretningen
3Lytt til resultatet før du bestemmer deg for videre blanding eller polering

Sjekkliste før fly

Jo renere vokalen er, jo mer stabilt blir konverteringsresultatet
Å skille vokal først slår vanligvis mating av blandet lyd direkte inn i RVC
Utdata passer til demoer og retningsvalidering - etterproduksjon anbefales fortsatt før offentlig utgivelse

Innlogging kreves for å bruke dette verktøyet

Logg på eller opprett en konto for å laste opp filer, sende inn oppgaver og gjennomgå resultater i arbeidsområdet ditt.

Informasjon om nettleserverktøy er alltid gratis - ingen konto nødvendig.