DLR-RM/stable-baselines3

[Feature Request] RAINBOW

Open

#622 ouverte le 22 oct. 2021

Voir sur GitHub
 (8 commentaires) (2 réactions) (0 assignés)Python (1 407 forks)batch import
enhancementhelp wanted

Métriques du dépôt

Stars
 (6 550 stars)
Métriques de merge PR
 (Merge moyen 11j 13h) (3 PRs mergées en 30 j)

Description

Important Note: We do not do technical support, nor consulting and don't answer personal questions per email. Please post your question on the RL Discord, Reddit or Stack Overflow in that case.

🚀 Feature

Implement RAINBOW (DQN + all extensions: noisy-net, double dqn, dueling, c51, prioritized experience replay).

closes #487 if it is implemented.

Motivation

This would allow to have DQN with all extensions while keeping DQN code simple.

  • I have checked that there is no similar issue in the repo (required)

Guide contributeur

Direction de recherche
Étudiez l'implémentation DQN existante dans stable baselines3 et chaque extension (noisy net, double dqn, dueling, c51, prioritized replay). Comprenez l'algorithme à partir de l'article Rainbow. Planifiez l'intégration en gardant la modularité de la base de code.
Stack technique
pythonpytorch
Domaine
machine learning
Type d'issue
Fonctionnalité
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
4
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
Plus d'une semaine
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
PythonPyTorchReinforcement Learning
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
30