thu-ml/tianshou

RNN related issues

Open

#937 aperta il 7 set 2023

Vedi su GitHub
 (12 commenti) (0 reazioni) (0 assegnatari)Python (1072 fork)batch import
RNNbughelp wanted

Metriche repository

Star
 (7121 star)
Metriche merge PR
 (Nessuna PR mergiata in 30 g)

Descrizione

There is a bunch of reported RNN problems: #795 #513 #486 and some others. Generally, performance of agents with RNN on top never seemed to be good. This should be looked into, compared with other libraries, and fixed.

@Trinkle23897 @araffin @BFAnas If you have ideas where to start or whom to ping, feel free to write here. I guess it won't be an easy one...

Until this is solved, it might make sense to document that using RNNs is currently discouraged.

Guida contributor

Direzione di ricerca
Indagare i problemi di prestazioni delle RNN in Tianshou, confrontarli con altre librerie RL (ad es. Stable Baselines3) e implementare correzioni basate sulle cause individuate.
Tech stack
pythonpytorch
Dominio
machine learningai
Tipo issue
Bug
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Oltre 1 settimana
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Richiede indagine
Prerequisiti
PythonPyTorchDeep Reinforcement LearningRNN
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
25