yl4579/StyleTTS2

Fine-tuning or training from scratch in a differente language?

Open

#197 aperta il 30 gen 2024

Vedi su GitHub
 (30 commenti) (0 reazioni) (0 assegnatari)Python (210 fork)batch import
help wanted

Metriche repository

Star
 (3429 star)
Metriche merge PR
 (Nessuna PR mergiata in 30 g)

Descrizione

Hi everyone, I'm considering putting some effort into training StyleTTS in Portuguese. I have a good-quality dataset for this task, however, I was in doubt if it would be better just to fine-tune the model (which I know was trained in English), or (since it's an unseen language) train the model from scratch in Portuguese.

Does anyone have some tips on what I should consider before making a decision?

Guida contributor

Direzione di ricerca
Confronta la dimensione e la qualità del tuo dataset portoghese con il dataset inglese originale. Considera il fine tuning se il tuo dataset è piccolo (es. <10 ore) per sfruttare le caratteristiche pre addestrate in inglese, o addestra da zero se hai un dataset grande (es. >100 ore) per catturare la prosodia specifica della lingua. Valuta anche le risorse computazionali: il fine tuning è più economico.
Tech stack
python
Dominio
machine learningaiaudio video rtc
Tipo issue
Ricerca
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
2
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
1-3 ore
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
PythonMachine Learning
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
70