mcp-tools audit: add an eval case for C4 description length
I maintainer di solito rispondono entro 1 giorno
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 2/5
- Tempo stimato
- 1-3 ore
- Idoneità per principianti
- 75/100
- Tipo di issue
- Funzionalità
- Chiarezza
- Specificata chiaramente
- Stato di attività
- Attiva
- Stack tecnologico
- json
- Ambito
- testing
Direzione di ricerca
Inizia da plugins/mcp-tools/skills/audit/evals/evals.json e copia la struttura di un caso esistente. Aggiungi una fixture con una descrizione di uno strumento e un campo instructions del server, ciascuno di oltre 2.048 caratteri, poi aggiungi un caso che si aspetti C4 WARN per ciascuno, verificando la linea guida sui dettagli critici vicino all'inizio. È completato quando il nuovo caso è in evals.json e l'esecuzione degli eval di audit riporta C4 WARN per entrambi i campi.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
The /mcp-tools:audit evals (plugins/mcp-tools/skills/audit/evals/evals.json) have no case exercising C4, the tool description and server instructions length criterion. #6779 re-grades an over-2,048-character description from FAIL to WARN after a source conflict between the mcp page, env-vars page and changelog 2.1.295/2.1.296; nothing checks that the audit applies the new grade.
Add a fixture with one tool description and one server instructions field over 2,048 characters, and an eval case expecting C4 WARN for each, with the critical-details-near-the-start guidance.
Found during the Claude Code v2.1.265..v2.1.296 changelog apply.
- Lingua principale
- Shell
- Stelle
- 22
- Fork
- 2
- Merge medio
- 8h 27m
- PR unite (30g)
- 957
Preparare l'ambiente
- Nessun Dockerfile né file Docker Compose
- Nessun modello di pull request
- Leggi la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di melodic-software/claude-code-plugins
-
priority: medium
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
melodic-software/claude-code-plugins#7351 · 2 commenti ·
I maintainer di solito rispondono entro 1 giorno
-
agent-ready priority: high work-class: scoped
Difficoltà 2/5 1-3 ore Idoneità per principianti 74/100
melodic-software/claude-code-plugins#7312 · 3 commenti ·
I maintainer di solito rispondono entro 1 giorno
-
priority: medium
Difficoltà 2/5 1-3 ore Idoneità per principianti 76/100
melodic-software/claude-code-plugins#7288 · 2 commenti ·
I maintainer di solito rispondono entro 1 giorno
-
knowledge: docpage-digest dual verification defines no verdict vocabulary or pass/fail thresholdApertaneeds-human
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
melodic-software/claude-code-plugins#7286 · 2 commenti ·
I maintainer di solito rispondono entro 1 giorno
-
priority: low
Difficoltà 2/5 1-3 ore Idoneità per principianti 76/100
melodic-software/claude-code-plugins#7282 · 2 commenti ·
I maintainer di solito rispondono entro 1 giorno
Tutte le issue di melodic-software/claude-code-plugins
Issue simili
-
Sourced-library load-guards use a top-level `return` that errors on direct execution (repo-wide)Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 62/100
rossoctl/automation#115 ·
I maintainer di solito rispondono entro 3 giorni
-
loongarch64: `unsupported linker arg: --no-rosegment` with rustc 1.100Forse già presa @monosans l’ha presa oggi. Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 62/100
rust-cross/cargo-zigbuild#503 ·
I maintainer di solito rispondono entro 1 giorno
-
netbox status: backlog topic: testing type: housekeeping
Difficoltà 2/5 1-3 ore Idoneità per principianti 70/100
netbox-community/netbox#23395 ·
I maintainer di solito rispondono entro 1 giorno
-
test/command failure with filtered `listxattr` syscallForse già presa @Kiskae l’ha presa oggi. Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
-
Difficoltà 2/5 Meno di un'ora Idoneità per principianti 82/100
I maintainer di solito rispondono entro 1 giorno