Add an eval case: outreach-writer follow-up after no reply
まだ誰も着手していません。
評価
- 難易度
- 2/5
- 見積もり時間
- 1〜3時間
- 初心者へのやさしさ
- 85/100
調査の方向性
evals/cases/outreach-writer/ 配下の既存のケースフォルダから始め、その case.yaml の構成を新しいケース 5-follow-up にコピーします。このケースには合格と不合格の基準が必要です。次に tests/test_validate_skills.py にある、件数の完全一致を確認するアサーション（スキルごとに4件を想定）を探し、5 に更新します。新しいケースファイルの検証が通り、そのテストが成功すれば完了です。
索引モデルが issue の本文から書いたものです。
説明
Add evals/cases/outreach-writer/5-follow-up/case.yaml: the user pastes a message they sent a week ago with no reply and asks for a follow-up. Pass if the follow-up is shorter, adds one new true detail or a placeholder for it, and makes it easy to decline. Fail if it guilt-trips, invents new facts, or suggests a third message.
Copy the structure of an existing case in evals/cases/outreach-writer/. Then update the case-count test in tests/test_validate_skills.py (it currently expects exactly 4 per skill).
- 主要言語
- Python
- スター
- 0
- フォーク
- 1
- PR マージ指標
- 30日以内にマージされた PR はありません
環境構築
- Dockerfile・Docker Compose ファイルなし
- プルリクエストのテンプレートあり
- コントリビューションガイドを読む
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
devanathsugavasi/devreach のほかの issue
-
help wanted tooling
難易度 2/5 半日 初心者へのやさしさ 70/100
devanathsugavasi/devreach#10 ·
-
documentation good first issue
難易度 2/5 1〜3時間 初心者へのやさしさ 75/100
-
evals help wanted
難易度 2/5 1〜3時間 初心者へのやさしさ 72/100
-
bug evals good first issue
難易度 1/5 1時間未満 初心者へのやさしさ 82/100
-
bug evals
難易度 2/5 1〜3時間 初心者へのやさしさ 68/100
devanathsugavasi/devreach の issue をすべて見る
似ている issue
-
follow-up
難易度 2/5 1〜3時間 初心者へのやさしさ 62/100
メンテナーはふだん 1 日以内に返信
-
Download helper still uses huggingface_hub arguments removed in 1.0: USE_SYMLINKS is silently ignored and every download ends with a WinError 3 line対応中かも @li-lizhe が今日担当しました。 オープン
難易度 2/5 1〜3時間 初心者へのやさしさ 78/100
-
IPv6 node addresses produce an invalid request URL対応中かも @RaphaelFakhri が今日担当しました。 オープン
難易度 2/5 1〜3時間 初心者へのやさしさ 82/100
typesense/typesense-python#154 ·
-
難易度 2/5 1〜3時間 初心者へのやさしさ 84/100
elastic/elasticsearch-py#3592 ·
メンテナーはふだん 1 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 77/100
developmentseed/titiler-cmr#250 · コメント 1 件 ·
メンテナーはふだん 1 日以内に返信