docs(evals): plugin-eval runs started in the background die when a headless launcher exits
Los mantenedores suelen responder en 1 día
Evaluación
- Dificultad
- 2/5
- Tiempo estimado
- 1-3 horas
- Aptitud para principiantes
- 78/100
- Tipo de issue
- Documentación
- Claridad
- Bien especificado
- Estado de actividad
- Activo
- Stack tecnológico
- markdown, shell
- Área
- documentation
Línea de trabajo
Edita plugins/evals/skills/plugin-eval/SKILL.md para que indique que en claude -p u otras sesiones no interactivas cada claude plugin eval debe ejecutarse en primer plano (o mediante CLI -j) y la sesión no debe salir mientras un run está en curso; cita el fallo headless del 2026-10-04 como evidencia. Añade un caso de eval cuyo prompt tenga forma headless y que falle una respuesta que pone el run en segundo plano y luego termina. Listo cuando el skill documente la regla y ese caso de eval falle el patrón incorrecto.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
Problem
On 2026-10-04 a headless claude -p session ran /evals:plugin-eval over three Bash-granting suites. It started each claude plugin eval run in the background, printed "The three suites are running in the background now", and exited. Exiting killed all three runs: every result file ended partial: true, partialReason: "interrupted", 12 to 39 seconds after start, and the validity gate marked all three INVALID. Spend was 4.56 USD (CLI list-price) with nothing measured. The same suites rerun as tracked foreground tasks completed normally (18.19 USD, valid).
Fix
The skill tells the run to stay attached: in a claude -p or other non-interactive session, run each claude plugin eval in the foreground (one after another, or with the CLI's own -j concurrency) and never end the session while a run is in flight. In an interactive session, a backgrounded run is fine only through a harness-tracked background task.
Acceptance
plugins/evals/skills/plugin-eval/SKILL.mdstates the rule, with this failure as its observed-stumble evidence.- An eval case gives a headless-shaped prompt and fails a reply that backgrounds the run and ends.
- Lenguaje dominante
- Shell
- Estrellas
- 22
- Forks
- 2
- Merge medio
- 7 h 57 min
- PR fusionados (30 d)
- 938
Preparar el entorno
- Sin Dockerfile ni archivo de Docker Compose
- Sin plantilla de pull request
- Leer la guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de melodic-software/claude-code-plugins
-
priority: low
Dificultad 2/5 1-3 horas Aptitud para principiantes 76/100
melodic-software/claude-code-plugins#8831 · 1 comentario ·
Los mantenedores suelen responder en 1 día
-
priority: medium status: confirmed
Dificultad 2/5 1-3 horas Aptitud para principiantes 72/100
melodic-software/claude-code-plugins#8801 ·
Los mantenedores suelen responder en 1 día
-
priority: low status: confirmed
Dificultad 2/5 1-3 horas Aptitud para principiantes 72/100
melodic-software/claude-code-plugins#8799 ·
Los mantenedores suelen responder en 1 día
-
fix(links): make the online link check green (23 errors since 2026-10-11)Posiblemente ocupada Un pull request vinculado a esta issue está abierto o ya se fusionó. Abiertopriority: medium
Dificultad 2/5 1-3 horas Aptitud para principiantes 72/100
melodic-software/claude-code-plugins#8730 · 1 comentario ·
Los mantenedores suelen responder en 1 día
-
priority: low
Dificultad 2/5 1-3 horas Aptitud para principiantes 74/100
melodic-software/claude-code-plugins#8709 · 1 comentario ·
Los mantenedores suelen responder en 1 día
Todos los issues de melodic-software/claude-code-plugins
Issues similares
-
Negative subscript on a sparse array counts from the number of elements, not from the highest indexAbiertoarea: compat bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 88/100
reubeno/brush#1570 · 1 comentario ·
Los mantenedores suelen responder en 1 día
-
bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
platform-mesh/helm-charts#2569 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 76/100
kunchenguid/firstmate#7604 ·
Los mantenedores suelen responder en 1 día
-
product-to-storybook is skipped silently by npx skills add because its frontmatter is invalid YAMLAbierto
Dificultad 1/5 Menos de una hora Aptitud para principiantes 83/100
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 83/100
Los mantenedores suelen responder en 1 día