kaldi-asr/kaldi

nnet3 : Reduce unnecessary outputs (file or email) during training

Open

#1349 aperta il 17 gen 2017

Vedi su GitHub
 (2 commenti) (0 reazioni) (0 assegnatari)Shell (5359 fork)batch import
enhancementhelp wantednnet3stale

Metriche repository

Star
 (15.392 star)
Metriche merge PR
 (Nessuna PR mergiata in 30 g)

Descrizione

(Created to ensure we keep track of a low priority issue.)

Status update emails are sent after every iteration if an email id is specified during training. However status information uses output of train/validation accuracy/log-probability computation jobs which are run in the background. In many cases these might be very slow to compute, depending on the model, as these are run on the CPU. This would mean that there are uninformative status mails which do not provide any info other than training time.

e.g.

 %Iter   duration        train_loss      valid_loss      difference
Total training time is 0:59:53

Guida contributor

Direzione di ricerca
Esamina lo script di training per trovare dove vengono inviate le email di stato. Modifica la logica per saltare l'invio quando non ci sono informazioni significative sui progressi.
Tech stack
shell
Dominio
machine learning
Tipo issue
Manutenzione
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
1
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Mezza giornata
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Datata
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Abbastanza chiara
Prerequisiti
GitKaldi basics
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
60