pytorch/examples

Resume will override learning rate on command line.

Open

Aperta il 19 ago 2020

Vedi su GitHub
 (1 commento) (0 reazioni) (0 assegnatari)Python (21.634 star) (9429 fork)batch import
good first issue

Descrizione

If you resume from a checkpoint and want to run with a new learning rate, the saved learning rate will overwrite what you specify on the command line. The fix is simple.

Guida contributor

Tech stack
pythonpytorch
Dominio
machine learning
Tipo issue
bug
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
2
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
under 1 hour
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
stale
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
clear
Prerequisiti
Python programmingPyTorch basics
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
70
Direzione di ricerca
Look at the training script where checkpoint loading is implemented. The issue is that the saved learning rate from the checkpoint overwrites the command line argument. Identify the line where the learning rate is restored and modify it to only set the learning rate from the checkpoint if no command line argument is provided. Ensure that the command line value takes precedence.