Qwen3 Integration
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 15/100
- Tipo di issue
- Funzionalità
- Chiarezza
- Abbastanza chiara
- Stato di attività
- Ferma
- Stack tecnologico
- python
- Ambito
- ai-infra-agents
Direzione di ricerca
This is an open question about benchmark results rather than a defined code change, and it has no comments or linked work. Start by finding the Generic agent prompt and the webarena and webarena-verified benchmark configs in the repository, then check whether a Qwen model backend can be configured. Done would mean a reproducible run with recorded scores, or a maintainer confirming the expected baseline.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
I have attempted to reproduce Qwen/Qwen3-Coder-30B-A3B-Instruct 's performance on webarena and webarena-verified. However, using the Generic agent prompt, I achieved extremely low performance. Has anyone benchmarked Qwen/Qwen3-Coder-30B-A3B-Instruct on any of the benchmarks integrated here?
- Lingua principale
- Python
- Stelle
- 644
- Fork
- 134
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Preparare l'ambiente
Questo progetto non fornisce container di sviluppo, Dockerfile né guida per i contributori, quindi l'ambiente è a tuo carico: parti dal suo README e consulta la nostra guida al primo contributo per i passaggi generali.
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di ServiceNow/AgentLab
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100
ServiceNow/AgentLab#340 ·
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100
ServiceNow/AgentLab#339 ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 22/100
ServiceNow/AgentLab#331 ·
-
Difficoltà 3/5 1-2 giorni Idoneità per principianti 25/100
ServiceNow/AgentLab#324 · 2 reazioni ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 18/100
ServiceNow/AgentLab#323 ·
Tutte le issue di ServiceNow/AgentLab
Issue simili
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
btclib-org/btclib-ecc#404 ·
-
changelog investigate
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 78/100
ramnes/notion-sdk-py#430 ·
-
bug good first issue
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 91/100
hyeonjoong/debussy#56 ·
-
README устарел: статус проекта, версия 0.1.0 при описании тега v0.1.1, семантика фолбэка поискаApertadocumentation
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
Lagrunge82/yandex-mail-mcp#43 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
liberation-data/drivine-python#252 · 1 commento ·
I maintainer di solito rispondono entro 1 giorno