DLR-RM/stable-baselines3

Prioritized Experience Replay for DQN

Ouverte

#1 242 ouverte le 26 déc. 2022

Voir sur GitHubGuide contributeur
 (10 commentaires) (0 réaction) (0 personne assignée)Python (1 407 forks)batch import
enhancementhelp wanted

Métriques du dépôt

Stars
 (6 550 étoiles)
Métriques de merge PR
 (Merge moyen 11j 13h) (3 PRs mergées en 30 j)

Description

🚀 Feature

Prioritized Experience Replay for DQN

Motivation

No response

Pitch

No response

Alternatives

No response

Additional context

No response

Checklist

  • I have checked that there is no similar issue in the repo

Guide contributeur

Direction de recherche
Implémentez l'expérience de relecture priorisée pour DQN, ce qui implique de modifier le tampon de relecture pour stocker les priorités et échantillonner en fonction de celles ci. Recherchez l'algorithme PER dans l'article 'Prioritized Experience Replay' (Schaul et al., 2015). Intégrez le dans l'implémentation DQN existante dans stable baselines3.
Stack technique
python
Domaine
machine learningai
Type d'issue
Fonctionnalité
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
3
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
1-2 jours
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Plutôt claire
Prérequis
PythonPyTorchReinforcement Learning basics
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
45