workarena_l3 benchmark not found
Dieses Issue hat noch niemand übernommen.
Bewertung
- Schwierigkeit
- 2/5
- Geschätzter Aufwand
- 1-3 Stunden
- Anfängerfreundlichkeit
- 35/100
Rechercherichtung
The payload names no files, so start by searching the repository for where benchmark names like workarena_l3 and workarena_l3_agent_curriculum_eval are registered, and reproduce the error by passing workarena_l3 as the benchmark. Confirm whether the second name exists and matches the L3 WorkArena task set. Done means the maintainers have settled the canonical name, and the code, an alias or the docs agree with it. The thread has no answer after 249 days, so check with a maintainer before writing a patch.
Vom Indexierungsmodell aus dem Issue-Text verfasst.
Beschreibung
Specifying the benchmark as "workarena_l3" raises an error. Is "workarena_l3_agent_curriculum_eval" the same as the set of L3 tasks from WorkArena? And if so, should this name be used instead of "workarena_l3"?
- Vorherrschende Sprache
- Python
- Sterne
- 644
- Forks
- 134
- PR-Merge-Kennzahlen
- Keine gemergten PRs in 30 T.
Entwicklungsumgebung
Dieses Projekt bietet weder Dev-Container noch Dockerfile noch Beitragsleitfaden – die Einrichtung liegt bei Ihnen. Beginnen Sie mit der README; die allgemeinen Schritte stehen in unserem Leitfaden für den ersten Beitrag.
Erste Schritte
- Lesen Sie das ganze Issue und danach den Beitragsleitfaden des Projekts.
- Schreiben Sie ins Issue, dass Sie es übernehmen — das erspart doppelte Arbeit.
- Forken Sie das Repository und arbeiten Sie in einem Branch.
- Öffnen Sie einen Pull Request, der die Issue-Nummer nennt.
Mehr aus ServiceNow/AgentLab
-
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 48/100
ServiceNow/AgentLab#340 ·
-
Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 25/100
ServiceNow/AgentLab#339 ·
-
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 22/100
ServiceNow/AgentLab#331 ·
-
Qwen3 IntegrationOffen
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 15/100
ServiceNow/AgentLab#329 ·
-
Schwierigkeit 3/5 1-2 Tage Anfängerfreundlichkeit 25/100
ServiceNow/AgentLab#324 · 2 Reaktionen ·
Alle Issues in ServiceNow/AgentLab
Ähnliche Issues
-
app: scripts status: backlog type: documentation
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 86/100
netbox-community/netbox-scripts#68 ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 1/5 Unter einer Stunde Anfängerfreundlichkeit 91/100
marin-community/marin#10765 ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 1/5 Unter einer Stunde Anfängerfreundlichkeit 70/100
flathub/com.unity.UnityHub#230 ·
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 72/100
Maintainer antworten meist innerhalb von 1 Tag
-
namespace operations
Schwierigkeit 1/5 Unter einer Stunde Anfängerfreundlichkeit 63/100
EclipseFdn/open-vsx.org#14910 ·
Maintainer antworten meist innerhalb von 1 Tag