instadeepai/Mava

[BUG]Jumanji RWARE reward shape mismatch

Open

#1.110 geöffnet am 24. Okt. 2024

Auf GitHub ansehen
 (1 Kommentar) (0 Reaktionen) (0 zugewiesene Personen)Python (122 Forks)auto 404
buggood first issue

Repository-Metriken

Stars
 (922 Stars)
PR-Merge-Metriken
 (PR-Metriken ausstehend)

Beschreibung

We found that in the 4ag RWARE task, env.reward_spec().generate_value() gives something of shape (), but the reward that environment outputs is actually of shape (num_agents).

This is curious because I believe the scenario should output a reward of shape ().

Maybe it's a wrapper thing?

Contributor Guide

Research-Richtung
Untersuchen Sie die Belohnungsfunktion in der 4ag RWARE Aufgabe und verfolgen Sie die step Funktion der Umgebung, um zu ermitteln, warum die Form von reward.spec() von der tatsächlichen Belohnungsform abweicht. Überprüfen Sie, ob ein Wrapper die Belohnung ändert.
Tech Stack
python
Domain
machine learningai
Issue Type
Fehler
SchwierigkeitGeschätzte Implementierungsschwierigkeit für neue Contributors, von 1 für sehr kleine Änderungen bis 5 für Expertenarbeit.
2
Geschätzte ZeitEin grober Zeitrahmen, um zu recherchieren, zu implementieren, zu testen und einen Pull Request vorzubereiten.
1-3 Stunden
AktivitätsstatusWie verfügbar das Issue gerade wirkt: frisch, aktiv, stale, blockiert oder wartet auf Maintainer-Input.
Aktiv
KlarheitWie klar das Issue die erwartete Änderung, Akzeptanzkriterien und den nächsten Schritt erklärt.
Klar
Voraussetzungen
PythonJAXreinforcement learning
EinsteigerfreundlichkeitEin Score von 1 bis 100, der schätzt, wie zugänglich dieses Issue für First-Time Contributors ist.
60