Add an eval case: outreach-writer follow-up after no reply
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 2/5
- Tempo stimato
- 1-3 ore
- Idoneità per principianti
- 85/100
Direzione di ricerca
Parti da una cartella di caso esistente in evals/cases/outreach-writer/ e copia la struttura del suo case.yaml per il nuovo caso 5-follow-up, che richiede criteri di superamento e di fallimento. Poi trova l'asserzione sul conteggio esatto (si aspetta 4 per skill) in tests/test_validate_skills.py e aggiornala a 5. È completato quando il nuovo file del caso viene validato e questo test passa.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Add evals/cases/outreach-writer/5-follow-up/case.yaml: the user pastes a message they sent a week ago with no reply and asks for a follow-up. Pass if the follow-up is shorter, adds one new true detail or a placeholder for it, and makes it easy to decline. Fail if it guilt-trips, invents new facts, or suggests a third message.
Copy the structure of an existing case in evals/cases/outreach-writer/. Then update the case-count test in tests/test_validate_skills.py (it currently expects exactly 4 per skill).
- Lingua principale
- Python
- Stelle
- 0
- Fork
- 1
- Merge medio
- 4h 10m
- PR unite (30g)
- 1
Preparare l'ambiente
- Nessun Dockerfile né file Docker Compose
- Ha un modello di pull request
- Leggi la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di devanathsugavasi/devreach
-
help wanted tooling
Difficoltà 2/5 Mezza giornata Idoneità per principianti 70/100
devanathsugavasi/devreach#10 ·
-
documentation good first issue
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
-
evals help wanted
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
-
bug evals good first issue
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 82/100
-
bug evals
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
Tutte le issue di devanathsugavasi/devreach
Issue simili
-
good first issue tools
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
I maintainer di solito rispondono entro 1 giorno
-
bug deferred domain:ci P1
Difficoltà 2/5 1-3 ore Idoneità per principianti 76/100
I maintainer di solito rispondono entro 1 giorno
-
get_page_thumbnail modifies cached page images, affecting later thumbnails and picture exportsAperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
docling-project/docling-mcp#147 ·
-
issue: A pipe model's Valves button ignores the Allow Chat Valves permissionForse già presa Una pull request collegata a questa issue è aperta o già unita. Apertabug confirmed issue
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
open-webui/open-webui#32771 · 1 commento ·
I maintainer di solito rispondono entro 1 giorno
-
Scheduled Security Scan is failing on mainForse già presa @pkupt l’ha presa oggi. Apertasecurity-scan-failure
Difficoltà 1/5 1-3 ore Idoneità per principianti 74/100
semantica-agi/semantica#2045 ·
I maintainer di solito rispondono entro 2 giorni