docs(evals): plugin-eval runs started in the background die when a headless launcher exits
メンテナーはふだん 1 日以内に返信
評価
- 難易度
- 2/5
- 見積もり時間
- 1〜3時間
- 初心者へのやさしさ
- 78/100
- issue の種類
- ドキュメント
- 明瞭さ
- 明確に書かれている
- 活発さ
- 活発
- 技術スタック
- markdown, shell
調査の方向性
plugins/evals/skills/plugin-eval/SKILL.md を編集し、claude -p またはその他の非対話セッションでは各 claude plugin eval をフォアグラウンド（または CLI -j）で実行しなければならず、実行中にセッションを終了してはならないと述べる。証拠として 2026-10-04 の headless 失敗を引用する。プロンプトが headless 形で、実行をバックグラウンドにしてから終了する返信を失敗させる eval ケースを追加する。スキルがルールを文書化し、その eval ケースが悪いパターンを失敗させたときに完了。
索引モデルが issue の本文から書いたものです。
説明
Problem
On 2026-10-04 a headless claude -p session ran /evals:plugin-eval over three Bash-granting suites. It started each claude plugin eval run in the background, printed "The three suites are running in the background now", and exited. Exiting killed all three runs: every result file ended partial: true, partialReason: "interrupted", 12 to 39 seconds after start, and the validity gate marked all three INVALID. Spend was 4.56 USD (CLI list-price) with nothing measured. The same suites rerun as tracked foreground tasks completed normally (18.19 USD, valid).
Fix
The skill tells the run to stay attached: in a claude -p or other non-interactive session, run each claude plugin eval in the foreground (one after another, or with the CLI's own -j concurrency) and never end the session while a run is in flight. In an interactive session, a backgrounded run is fine only through a harness-tracked background task.
Acceptance
plugins/evals/skills/plugin-eval/SKILL.mdstates the rule, with this failure as its observed-stumble evidence.- An eval case gives a headless-shaped prompt and fails a reply that backgrounds the run and ends.
- 主要言語
- Shell
- スター
- 22
- フォーク
- 2
- 平均マージ
- 8時間 34分
- マージ済み PR（30日）
- 946
環境構築
- Dockerfile・Docker Compose ファイルなし
- プルリクエストのテンプレートなし
- コントリビューションガイドを読む
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
melodic-software/claude-code-plugins のほかの issue
-
needs-human needs-triage
難易度 2/5 1〜3時間 初心者へのやさしさ 82/100
melodic-software/claude-code-plugins#7636 · コメント 1 件 ·
メンテナーはふだん 1 日以内に返信
-
agent-ready needs-human
難易度 2/5 1〜3時間 初心者へのやさしさ 77/100
melodic-software/claude-code-plugins#7598 · コメント 4 件 ·
メンテナーはふだん 1 日以内に返信
-
good first issue priority: low
難易度 2/5 1〜3時間 初心者へのやさしさ 62/100
melodic-software/claude-code-plugins#7530 · コメント 1 件 ·
メンテナーはふだん 1 日以内に返信
-
needs-human priority: medium
難易度 2/5 1〜3時間 初心者へのやさしさ 65/100
melodic-software/claude-code-plugins#7455 · コメント 1 件 ·
メンテナーはふだん 1 日以内に返信
-
priority: medium
難易度 2/5 1〜3時間 初心者へのやさしさ 68/100
melodic-software/claude-code-plugins#7351 · コメント 2 件 ·
メンテナーはふだん 1 日以内に返信
melodic-software/claude-code-plugins の issue をすべて見る
似ている issue
-
agent/quality help wanted origin/quality quality stage/010-actionable testing
難易度 2/5 1〜3時間 初心者へのやさしさ 75/100
hivecommons/hotshot#227 ·
メンテナーはふだん 1 日以内に返信
-
enhancement
難易度 2/5 1〜3時間 初心者へのやさしさ 74/100
sleeyax/promptfiles#20 ·
-
Add Photocraftオープンenhancement
難易度 2/5 1〜3時間 初心者へのやさしさ 67/100
メンテナーはふだん 1 日以内に返信
-
難易度 1/5 1時間未満 初心者へのやさしさ 78/100
-
bug
難易度 2/5 1〜3時間 初心者へのやさしさ 62/100