planning evals: reorder-points case expects a MEDIUM blast radius and no reviewer dispatch, which main's plan skill cannot both satisfy
Maintainer antworten meist innerhalb von 1 Tag
Dieses Issue hat noch niemand übernommen.
Bewertung
- Schwierigkeit
- 2/5
- Geschätzter Aufwand
- 1-3 Stunden
- Anfängerfreundlichkeit
- 66/100
- Issue-Typ
- Bug
- Klarheit
- Klar beschrieben
- Aktivitätsstatus
- Aktiv
- Tech-Stack
- shell
- Bereich
- ai-infra-agents
Rechercherichtung
Lies plugins/planning/skills/plan/SKILL.md unter „Reviewer“ und vergleiche es mit den beiden Gradern und der im Issue genannten Fixture. Untersuche anschließend die benachbarten plan-reviewer-cut-Fälle aus #15465 auf denselben Konflikt. Aktualisiere den Fall so, dass beide Grader die ausgelieferte Regel von main widerspiegeln, und überprüfe in drei Durchläufen, dass beide in einem Lauf bestehen.
Vom Indexierungsmodell aus dem Issue-Text verfasst.
Beschreibung
Problem
Two graders of the eval case plugins/planning/evals/plan-reviewer-cut-medium-reorder-points cannot both pass on main:
graders/blast-radius-medium.mdrequires the plan to rate the blast radius MEDIUM (patternblast[ -]radius[^\n]{0,12}?\bMEDIUM\b).graders/reviewer-not-dispatched.mdrequires that noplan-revieweragent is dispatched (min: 0,max: 0,arm: both).plugins/planning/skills/plan/SKILL.md("Reviewer"): underautothe reviewer "runs when the Step 3b blast radius is MEDIUM or higher". The case's scaffold setsverification: standard(plugins/planning/evals/fixtures/plan-reviewer-cut/init-repo.sh), so a MEDIUM rating dispatches the reviewer.
Both graders came in #15465, written for a cut of the reviewer at MEDIUM. That cut did not ship: the reviewer stays on at MEDIUM until measured. In the run recorded for #16921, blast-radius-medium failed 3 of 3 runs and reviewer-not-dispatched passed 3 of 3. Each grader weighs 0.001, so no score moved, but the case's name no longer says what it exercises.
Options
- (a) Drop
max: 0fromreviewer-not-dispatchedin this case, so it matches the shipped rule that MEDIUM runs the reviewer. Recommended (basis:plugins/planning/skills/plan/SKILL.md, "Reviewer"). - (b) Retarget the case to LOW: rename it and change
blast-radius-medium, if the scaffold's four changed files with a clean revert are meant to rate LOW (plugins/planning/skills/plan/context/stress-test-triggers.mdrates 3 to 10 files MEDIUM and "Git revert works" lower).
Done when
- Both graders can pass in one run on main's plan skill, and a run of 3 shows it.
- The sibling
plan-reviewer-cutcases from #15465 are checked for the same conflict.
Source: workshop 01 close-out audit.
- Vorherrschende Sprache
- Shell
- Sterne
- 22
- Forks
- 2
- Ø Merge
- 1 Std. 20 Min.
- Gemergte PRs (30 T.)
- 952
Entwicklungsumgebung
- Kein Dockerfile und keine Docker-Compose-Datei
- Keine Pull-Request-Vorlage
- Beitragsleitfaden lesen
Erste Schritte
- Lesen Sie das ganze Issue und danach den Beitragsleitfaden des Projekts.
- Schreiben Sie ins Issue, dass Sie es übernehmen — das erspart doppelte Arbeit.
- Forken Sie das Repository und arbeiten Sie in einem Branch.
- Öffnen Sie einen Pull Request, der die Issue-Nummer nennt.
Mehr aus melodic-software/claude-code-plugins
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 78/100
melodic-software/claude-code-plugins#16931 · 3 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 76/100
melodic-software/claude-code-plugins#16912 ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 78/100
melodic-software/claude-code-plugins#16841 · 1 Kommentar ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 64/100
melodic-software/claude-code-plugins#16836 · 3 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 63/100
melodic-software/claude-code-plugins#16834 · 3 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
Alle Issues in melodic-software/claude-code-plugins
Ähnliche Issues
-
26.04 bug dark-mode Easy Hack impress symptom: visual
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 68/100
CollaboraOnline/online#16421 · 1 Kommentar ·
-
Pin Python to 3.14 in the era5grib-parallel environment specificationEvtl. vergeben @atteggiani hat das heute übernommen. Offen
Schwierigkeit 1/5 Unter einer Stunde Anfängerfreundlichkeit 85/100
ACCESS-NRI/containerised-environments-infra#129 ·
Maintainer antworten meist innerhalb von 2 Tagen
-
priority middle
Schwierigkeit 1/5 Unter einer Stunde Anfängerfreundlichkeit 72/100
KATO-Hiro/AtCoderClans#13029 ·
Maintainer antworten meist innerhalb von 1 Tag
-
bug version-D
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 68/100
-
Missing icon: longshotOffen
Schwierigkeit 1/5 Unter einer Stunde Anfängerfreundlichkeit 78/100