thu-ml/tianshou

RNN related issues

Open

#937 ouverte le 7 sept. 2023

Voir sur GitHub
 (12 commentaires) (0 réactions) (0 assignés)Python (1 072 forks)batch import
RNNbughelp wanted

Métriques du dépôt

Stars
 (7 121 stars)
Métriques de merge PR
 (Aucune PR mergée en 30 j)

Description

There is a bunch of reported RNN problems: #795 #513 #486 and some others. Generally, performance of agents with RNN on top never seemed to be good. This should be looked into, compared with other libraries, and fixed.

@Trinkle23897 @araffin @BFAnas If you have ideas where to start or whom to ping, feel free to write here. I guess it won't be an easy one...

Until this is solved, it might make sense to document that using RNNs is currently discouraged.

Guide contributeur

Direction de recherche
Enquetez sur les problèmes de performance des RNN dans Tianshou, comparez avec d'autres bibliotheques RL (par exemple Stable Baselines3) et implementez des correctifs bases sur les causes racines identifiees.
Stack technique
pythonpytorch
Domaine
machine learningai
Type d'issue
Bug
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
3
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
Plus d'une semaine
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Investigation requise
Prérequis
PythonPyTorchDeep Reinforcement LearningRNN
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
25