HuBERT: Self-Supervised Speech Representation Learning
IEEE/ACM TASLP - 2021
Το HuBERT παρέχει αυτοεποπτευόμενες αναπαραστάσεις ομιλίας που χρησιμοποιούνται από αγωγούς μετατροπής φωνής τύπου RVC.
Φόρτωση...
Εισαγωγή
Καθαρίστε vocals, υλικό κάλυψης ή διαχωρισμένο vocal stems μέσω μιας αλυσίδας μετατροπής RVC v2
Μορφές ήχου
Παραγωγή
Μετατροπή vocals, πρωτότυπες αναφορές vocal και ήχος με δυνατότητα λήψης για επιδείξεις και τεστ ακρόασης
Περίπτωση χρήσης
Μετατροπή χρώματος φωνής, επιδείξεις εξωφύλλου και πειράματα φωνής χαρακτήρων
Στα σχόλιά σας αναφέρετε το εργαλείο, τα βήματα και το πρόβλημα. Τα στιγμιότυπα οθόνης βοηθούν στον εντοπισμό του.
Η pipeline AI για cover τραγουδιών συνδυάζει διαχωρισμό, μετατροπή φωνής RVC και μίξη. Οι βασικές είσοδοι είναι ένα vocal αρχείο και ένα μοντέλο φωνής στόχου.
RVC v2 μετατρέπει την είσοδο vocal τη χροιά στο επιλεγμένο μοντέλο φωνής χαρακτήρων.
Το AI-RVC v1.6.0 χρησιμοποιεί από προεπιλογή το RMVPE για την εξαγωγή του τονικού ύψους της φωνής.
Διαχωρισμός αρμονίας: MVSep 9205 παρέχει το σκέλος μολύβδου/συνοδείας με αρμονία, BS-RoFormer μπάντες Leap XE 90 παρέχει vocals με αρμονία και οι μπάντες BS-RoFormer Leap Instrumental παρέχουν την αναφορά συνοδείας.
Ο αγωγός κάλυψης AI διαχωρίζει vocals/συνοδεία πριν από τη μετατροπή και τη μίξη.
Σύνολα δεδομένων, εκδόσεις και συνθήκες παραμένουν χωριστά, ακόμη και πηγές χωρίς επιλέξιμες γραμμές.
Τοπικά εκτελέσιμα 0 / αρχικές γραμμές 6
Δεν έχει επαληθευτεί πλήρες δημόσιο πακέτο εξαγωγής συμπερασμάτων για αυτά τα πειράματα. Άλλα βάρη με το ίδιο όνομα μοντέλου δεν αρκούν.
PYIN [6] · CREPE [7] · HARMOF0 [9] · CRN-Raw [13] · JDC [14] · RMVPEPoly
IEEE/ACM TASLP - 2021
Το HuBERT παρέχει αυτοεποπτευόμενες αναπαραστάσεις ομιλίας που χρησιμοποιούνται από αγωγούς μετατροπής φωνής τύπου RVC.
Interspeech - 2023
Το RMVPE είναι ένας ισχυρός εκτιμητής τόνου vocal Interspeech 2023 που έχει σχεδιαστεί για πολυφωνική μουσική και χρησιμοποιείται για εξαγωγή F0 με πρώτη ποιότητα.
Official repository - current
Το έργο RVC είναι η επίσημη τεχνική πηγή για τη ροή εργασιών μετατροπής φωνής που βασίζεται στην ανάκτηση VITS/HuBERT.
Βρείτε μεθόδους και βήματα κατάλληλα για το υλικό σας.