AI cover vokali · TelkNet

Glas i vokaliGPU radno opterećenje

AI cover vokali

Korisnici koji vrše eksperimente sa bojama glasa, demo naslovnice ili glasovne probe likova

Pretvoreni vokali, originalne vokalne reference i audio koji se može preuzeti za demo snimke i testove slušanja

5 krediti/upotrebaUlaz audio datotekeNajviše 100 MBProcijenjeno 180-900 sekundi

Unos

Očistite vokal, omotni materijal ili odvojene vokalne osnove kroz RVC v2 lanac konverzije

Audio formati

mp3wavflacoggm4aaac

Izlaz

Pretvoreni vokali, originalne vokalne reference i audio koji se može preuzeti za demo snimke i testove slušanja

Najbolje za

Korisnici koji vrše eksperimente sa bojama glasa, demo naslovnice ili glasovne probe likova

Modeli, parametri i izvori

AI cover pipeline kombinuje razdvajanje, RVC konverziju glasa i mixdown. Osnovni ulazi su vokalni fajl i ciljni glasovni model.

RVC v2

RVC v2 pretvara ulazni vokalni tembar u odabrani glasovni model karaktera.

RVC Project TelkNet AI-RVC adapter HuBERT

Pipeline: RVC v2 pretvara odvojeni izvorni vokal u odabrani glasovni model, a zatim se miješa s pratnjom.
Preporučene zadane postavke TelkNet-a: trenutni cjevovod, RoFormer separator, ensemble:vocal_rvc, hibridni F0, index_ratio 0,50.
Glasovni model: odabrani voice_model_id bira RVC kontrolnu tačku i opcijski FAISS indeks.

RMVPE / hybrid F0

RMVPE je robustan procenjivač tona glasa koji koristi RVC putanja i hibridna F0 opcija.

RVC Project RMVPE

Uloga visine tona: prati izvorni vokal F0 prije konverzije tako da ciljni tembar prati melodiju.
Hibridni režim: kombinuje RMVPE sa alternativnim ekstraktorima za kvalitetno pokrivanje pevanja.
Javni dokazi: RMVPE Interspeech papir izvještava o vrhunskom RPA/RCA/OA o višestrukim skupovima podataka o visini polifonih vokalnih visina.

RoFormer / Karaoke / Demucs separation

AI cover pipeline odvaja vokale/pratnju prije konverzije i miksanja.

python-audio-separator facebookresearch/demucs MVSep algorithms Mel-Band RoFormer BS-RoFormer HT Demucs

Primarni separator: RoFormer vocal_rvc ansambl priprema čiste vokale i pratnju prije RVC-a.
Harmony path: Karaoke odvajanje vodeće/backove može izvesti glavne vokale, prateće vokale i pratnju koja je svesna harmonije.
Zamjena: Demucs i UVR5 rute ostaju odabrane radi kompatibilnosti, ali RoFormer je zadana postavka kvaliteta na prvom mjestu.

Poređenje modela

Model alata

Uloga

Zašto se koristi

Izlazni uticaj

Model alataRVC v2

RVC Project TelkNet AI-RVC adapter HuBERT

UlogaJezgro za konverziju glasa

Zašto se koristiRVC v2 daje odabrani ciljni tembar i konverziju uz pomoć indeksa.

Izlazni uticajPretvoreni vokal

Model alataRMVPE / hybrid F0

RVC Project RMVPE

UlogaEkstrakcija smole

Zašto se koristiRMVPE je robustan u polifonom pevanju i predstavlja put na prvom mestu kvaliteta.

Izlazni uticajMelodija/F0 kontura

Model alataRoFormer vocal_rvc ensemble

python-audio-separator MVSep algorithms Mel-Band RoFormer BS-RoFormer

UlogaVokalna priprema

Zašto se koristiRoFormer vocal_rvc je podrazumevani separator za čistiji RVC unos.

Izlazni uticajVokal i pratnja

Model alataDemucs / UVR5 fallback

facebookresearch/demucs HT Demucs python-audio-separator

UlogaRazdjelnik kompatibilnosti

Zašto se koristiDemucs/UVR5 ostaju korisni kada se određeni izvor ponaša bolje izvan RoFormera.

Izlazni uticajAlternativne stabljike

Papir i beleške

HuBERT: Self-Supervised Speech Representation Learning

IEEE/ACM TASLP - 2021

HuBERT pruža samonadzirane govorne reprezentacije koje koriste RVC-stilizirani lanci za konverziju glasa.

arXiv:2106.07447

RMVPE: A Robust Model for Vocal Pitch Estimation in Polyphonic Music

Interspeech - 2023

RMVPE je robustan procjenjivač visine glasa za polifonijsku muziku predstavljen na Interspeechu 2023. i koristi se za kvalitetno izdvajanje F0.

ISCA PDF

RVC Project

Official repository - current

RVC projekat je zvanični tehnički izvor za VITS/HuBERT proces konverzije glasa zasnovan na pronalaženju.

RVC WebUI

Službeni / repozitoriji

RVC Project TelkNet AI-RVC adapter python-audio-separator facebookresearch/demucs MVSep algorithms

Radovi / tehničke napomene

HuBERT RMVPE Mel-Band RoFormer BS-RoFormer HT Demucs

Vodič za parametre

Glasovni model: odabire ciljne težine znakova i indeks preuzimanja.
Pomak visine tona: podešava izvor po polutonovima kako bi odgovarao ciljnom rasponu.
Omjer indeksa: kontrolira koliko indeks preuzimanja utječe na boju glasa.
Metoda F0: odabire RMVPE, CREPE, žetvu ili drugu putanju ekstrakcije koraka.
Separator: koristi RoFormer, UVR5 ili Demucs prije konverzije.
Cjevovod za konverziju: zadano je uključeni lanac poklopca AI-RVC; službena ruta 1:1 se i dalje može odabrati ručno.
Kontrole miksa: podesite vokal, pratnju, reverb i originalno-vokalnu mješavinu.

Slučajevi upotrebe

Izgradite demo demo omota i probne verzije glasa likova
Potvrdite smjer glasa prije dublje produkcije
Uključite odvojene vokale u nizvodni radni tok pjevanja

Tok rada

1Radije otpremite već odvojeni vokalni materijal
2Pošaljite zadatak konverzije s ciljanim glasovnim smjerom
3Poslušajte rezultat prije nego se odlučite za dalje miješanje ili poliranje

Kontrolna lista prije leta

Što je vokal čišći, to je stabilniji rezultat konverzije
Prvo razdvajanje vokala obično je bolje od ubacivanja mešovitog zvuka direktno u RVC
Izlaz odgovara demonstracijama i provjeri smjera - postprodukcija se i dalje preporučuje prije javnog objavljivanja

Za korištenje ovog alata potrebna je prijava

Prijavite se ili kreirajte nalog za otpremanje datoteka, slanje zadataka i pregled rezultata u svom radnom prostoru.

Informacije o alatu za pregledavanje su uvijek besplatne - nije potreban račun.