yl4579/StyleTTS2

Fine-tuning or training from scratch in a differente language?

Open

#197 ouverte le 30 janv. 2024

Voir sur GitHub
 (30 commentaires) (0 réactions) (0 assignés)Python (210 forks)batch import
help wanted

Métriques du dépôt

Stars
 (3 429 stars)
Métriques de merge PR
 (Aucune PR mergée en 30 j)

Description

Hi everyone, I'm considering putting some effort into training StyleTTS in Portuguese. I have a good-quality dataset for this task, however, I was in doubt if it would be better just to fine-tune the model (which I know was trained in English), or (since it's an unseen language) train the model from scratch in Portuguese.

Does anyone have some tips on what I should consider before making a decision?

Guide contributeur

Direction de recherche
Comparez la taille et la qualité de votre jeu de données portugais avec le jeu de données anglais original. Envisagez un réglage fin si votre jeu de données est petit (ex. <10 heures) pour tirer parti des caractéristiques pré entraînées en anglais, ou un entraînement à partir de zéro si vous avez un grand jeu de données (ex. >100 heures) pour capturer la prosodie spécifique à la langue. Évaluez également les ressources de calcul : le réglage fin est moins coûteux.
Stack technique
python
Domaine
machine learningaiaudio video rtc
Type d'issue
Recherche
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
2
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
1-3 heures
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
PythonMachine Learning
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
70