NVIDIA/SkillEvaluator

ログインしてフォロー GitHub で見る

Multi-tier framework for evaluating AI agent skills with quality gates, semantic overlap detection, synthetic evaluation dataset generation, and live agent evaluation that measures how skills affect agent behavior.

NVIDIA/SkillEvaluator は初心者に優しい？

直近 30 日間に、NVIDIA/SkillEvaluator は外部コントリビューターの PR 27 件のうち 20 件をマージしました。メンテナーはふだん 2 日以内に返信します。 初心者向けのオープンな issue は今はありません。下の一覧に、このリポジトリのほかの issue があります。

スター
642
フォーク
83
オープンの初心者向け issue
0
索引済み issue
42
平均マージ
2日 3時間
マージ済み PR（30日）
170
主要言語
Python
ライセンス
Apache-2.0
最終 GitHub push
2026年11月4日
最新の索引
2026年9月19日
コントリビューションガイド
行動規範
初心者向けラベル
初心者向けラベルは索引されていません

NVIDIA/SkillEvaluator にコントリビュートするには

  1. まずコントリビューションガイドを読みましょう。変更の提案、テスト、レビューの進め方が書かれています。
  2. Dockerfile または Docker Compose ファイルがあるので、ツールチェーン一式を入れなくても動かせます。
  3. 行動規範も読んでおきましょう。チャットだけでなく issue や PR にも適用されます。
  4. リポジトリをフォローすれば、新しい初心者向け issue が出たときにわかります。下のほかの issue も見てみましょう。
初心者向け すべて
オープン すべて

誰かが対応中かもしれないイシューは最後に並べています。 すべて日付順に表示

  • tier1 crashes with UnicodeEncodeError on a cp936 Windows console while printing the summary
    オープン
    • 何か問題がありますか？

    難易度 2/5 1〜3時間 初心者へのやさしさ 69/100

    NVIDIA/SkillEvaluator#446 ·

    メンテナーはふだん 2 日以内に返信

  • [FEA]: Move the rest of Tier 1 configs out of code and into YAML files
    オープン
    • 何か問題がありますか？
    enhancement

    難易度 4/5 3〜5日 初心者へのやさしさ 45/100

    NVIDIA/SkillEvaluator#329 · コメント 1 件 ·

    メンテナーはふだん 2 日以内に返信

  • Preserve complete rubric references and native Codex tool evidence
    オープン
    • 何か問題がありますか？

    難易度 5/5 1週間以上 初心者へのやさしさ 25/100

    NVIDIA/SkillEvaluator#236 · コメント 1 件 ·

    メンテナーはふだん 2 日以内に返信

  • [BUG]: Native Codex inline and allSettled wrappers remain unsupported
    オープン
    • 何か問題がありますか？

    難易度 4/5 3〜5日 初心者へのやさしさ 48/100

    NVIDIA/SkillEvaluator#235 ·

    メンテナーはふだん 2 日以内に返信

  • [BUG]: Behavior evidence drops final-answer text while reporting no truncation
    オープン
    • 何か問題がありますか？

    難易度 4/5 3〜5日 初心者へのやさしさ 48/100

    NVIDIA/SkillEvaluator#234 ·

    メンテナーはふだん 2 日以内に返信

  • [BUG]: Generated BENCHMARK.md does not faithfully explain a passing gate and splits canonical case IDs
    オープン
    • 何か問題がありますか？

    難易度 4/5 3〜5日 初心者へのやさしさ 35/100

    NVIDIA/SkillEvaluator#192 · コメント 1 件 ·

    メンテナーはふだん 2 日以内に返信

  • [FEA]: Support Hermes as a Tier 3 agent with native NVIDIA Build routing
    オープン
    • 何か問題がありますか？
    enhancement

    難易度 5/5 1週間以上 初心者へのやさしさ 35/100

    NVIDIA/SkillEvaluator#150 ·

    メンテナーはふだん 2 日以内に返信

  • [FEA]: Run the container as non-root, and drop the report template's CDN dependency
    オープン
    • 何か問題がありますか？

    難易度 4/5 3〜5日 初心者へのやさしさ 35/100

    NVIDIA/SkillEvaluator#127 ·

    メンテナーはふだん 2 日以内に返信

  • Proposal: an EvalPort/OpenEval adapter for SkillEvaluator's ValidationResult
    オープン
    • 何か問題がありますか？

    難易度 4/5 3〜5日 初心者へのやさしさ 52/100

    NVIDIA/SkillEvaluator#64 ·

    メンテナーはふだん 2 日以内に返信

  • [BUG]: The numbers produced by this tool appear to be meaningless?
    オープン
    • 何か問題がありますか？
    bug

    難易度 5/5 1週間以上 初心者へのやさしさ 35/100

    NVIDIA/SkillEvaluator#61 · コメント 2 件 ·

    メンテナーはふだん 2 日以内に返信

  • roadmap: scale Tier 2 overlap detection for registry-sized catalogs
    再び着手できるかも オープン
    • 何か問題がありますか？

    難易度 5/5 1週間以上 初心者へのやさしさ 25/100

    NVIDIA/SkillEvaluator#41 · コメント 1 件 ·

    メンテナーはふだん 2 日以内に返信

  • ux: add consolidated Tier 1 scanner preflight and guided bootstrap
    再び着手できるかも オープン
    • 何か問題がありますか？

    難易度 5/5 1週間以上 初心者へのやさしさ 35/100

    NVIDIA/SkillEvaluator#42 · コメント 1 件 ·

    メンテナーはふだん 2 日以内に返信

  • policy: make metadata.author and metadata.id requirements profile-controlled
    オープン
    • 何か問題がありますか？

    難易度 5/5 1週間以上 初心者へのやさしさ 35/100

    NVIDIA/SkillEvaluator#43 · コメント 2 件 ·

    メンテナーはふだん 2 日以内に返信

  • [FEA]: Add reusable-workflow input for advisory/report-only enforcement mode
    対応中かも オープン
    • 何か問題がありますか？

    難易度 4/5 3〜5日 初心者へのやさしさ 55/100

    NVIDIA/SkillEvaluator#396 ·

    メンテナーはふだん 2 日以内に返信

  • [FEA]: Add Tier 3 skill interaction evaluation
    対応中かも オープン
    • 何か問題がありますか？
    enhancement

    難易度 5/5 1週間以上 初心者へのやさしさ 20/100

    NVIDIA/SkillEvaluator#390 ·

    メンテナーはふだん 2 日以内に返信

  • Distinguish ownership-contact PII policy and retain SkillSpector completeness diagnostics
    対応中かも オープン
    • 何か問題がありますか？

    難易度 5/5 1週間以上 初心者へのやさしさ 35/100

    NVIDIA/SkillEvaluator#331 ·

    メンテナーはふだん 2 日以内に返信

  • [BUG]: Tier 3 goal-accuracy judge can misgrade NBSP-sensitive answers
    対応中かも オープン
    • 何か問題がありますか？

    難易度 4/5 3〜5日 初心者へのやさしさ 36/100

    NVIDIA/SkillEvaluator#241 ·

    メンテナーはふだん 2 日以内に返信

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。