Agent evaluation harness for CI. Grades from outside the container, reports pass^k instead of a mean, and tells you when the run could not have detected the regression.

patsypppe/meridian は初心者に優しい?

patsypppe/meridian のメンテナーはふだん 1 日以内に PR へ返信します。 初心者向けのオープンな issue は今はありません。下の一覧に、このリポジトリのほかの issue があります。

スター
0
フォーク
0
オープンの初心者向け issue
0
索引済み issue
127
平均マージ
1時間 54分
マージ済み PR(30日)
14
主要言語
Python
ライセンス
MIT
最終 GitHub push
2026年11月4日
最新の索引
2026年11月4日
コントリビューションガイド
コントリビューションガイド
行動規範
行動規範
初心者向けラベル
good first issue help wanted

patsypppe/meridian にコントリビュートするには

  1. まずコントリビューションガイドを読みましょう。変更の提案、テスト、レビューの進め方が書かれています。
  2. Dockerfile または Docker Compose ファイルがあるので、ツールチェーン一式を入れなくても動かせます。
  3. 行動規範も読んでおきましょう。チャットだけでなく issue や PR にも適用されます。
  4. リポジトリをフォローすれば、新しい初心者向け issue が出たときにわかります。下のほかの issue も見てみましょう。
issue を読み込んでいます

誰かが対応中かもしれないイシューは最後に並べています。 すべて日付順に表示

  • Tests wanted: start here
    オープン
    area: tests help wanted tests

    難易度 1/5 1時間未満 初心者へのやさしさ 25/100

    patsypppe/meridian#166 ·

    メンテナーはふだん 1 日以内に返信

  • Integration test: a credential never reaches a trial
    オープン
    area: security area: tests size: S tests

    難易度 2/5 1〜3時間 初心者へのやさしさ 84/100

    patsypppe/meridian#165 ·

    メンテナーはふだん 1 日以内に返信

  • Integration test: grader-only files never reach the trial
    オープン
    area: grading area: security area: tests size: M tests

    難易度 3/5 1〜2日 初心者へのやさしさ 74/100

    patsypppe/meridian#164 ·

    メンテナーはふだん 1 日以内に返信

  • Detect flaky integration tests
    オープン
    area: ci size: S tests

    難易度 3/5 1〜2日 初心者へのやさしさ 66/100

    patsypppe/meridian#163 ·

    メンテナーはふだん 1 日以内に返信

  • Run unit tests in random order
    オープン
    area: ci good first issue size: XS tests

    難易度 3/5 1〜2日 初心者へのやさしさ 72/100

    patsypppe/meridian#162 ·

    メンテナーはふだん 1 日以内に返信

  • Mutation testing for the statistics module
    オープン
    area: stats area: tests help wanted size: M tests

    難易度 3/5 1〜2日 初心者へのやさしさ 67/100

    patsypppe/meridian#161 ·

    メンテナーはふだん 1 日以内に返信

  • Dashboard: accept run files with extra fields
    オープン
    area: dashboard area: tests good first issue size: XS tests

    難易度 1/5 1〜3時間 初心者へのやさしさ 88/100

    patsypppe/meridian#160 ·

    メンテナーはふだん 1 日以内に返信

  • Component tests for the dashboard's charts and comparison
    オープン
    area: dashboard area: tests good first issue size: S tests

    難易度 2/5 1〜3時間 初心者へのやさしさ 76/100

    patsypppe/meridian#159 ·

    メンテナーはふだん 1 日以内に返信

  • Tests for the dashboard's formatting helpers
    オープン
    area: dashboard area: tests good first issue size: XS tests

    難易度 2/5 1〜3時間 初心者へのやさしさ 88/100

    patsypppe/meridian#158 ·

    メンテナーはふだん 1 日以内に返信

  • Test the gate comment with harness-error causes
    オープン
    area: gate area: tests good first issue size: S tests

    難易度 1/5 1〜3時間 初心者へのやさしさ 85/100

    patsypppe/meridian#157 ·

    メンテナーはふだん 1 日以内に返信

  • Test the HTML report with harness-error causes
    オープン
    area: tests good first issue size: S tests

    難易度 2/5 1〜3時間 初心者へのやさしさ 86/100

    patsypppe/meridian#156 ·

    メンテナーはふだん 1 日以内に返信

  • Golden tests for the importer against real Harbor tasks
    オープン
    area: importer area: tests help wanted size: M tests

    難易度 3/5 1〜2日 初心者へのやさしさ 74/100

    patsypppe/meridian#155 ·

    メンテナーはふだん 1 日以内に返信

  • More translation cases for the OpenAI-compatible proxy
    オープン
    area: proxy area: tests good first issue size: S tests

    難易度 2/5 1〜3時間 初心者へのやさしさ 88/100

    patsypppe/meridian#154 ·

    メンテナーはふだん 1 日以内に返信

  • Test the grading sandbox's command construction
    オープン
    area: grading area: tests good first issue size: S tests

    難易度 2/5 1〜3時間 初心者へのやさしさ 75/100

    patsypppe/meridian#153 ·

    メンテナーはふだん 1 日以内に返信

  • Test how the proxy container's environment is built
    オープン
    area: proxy area: tests size: S tests

    難易度 2/5 1〜3時間 初心者へのやさしさ 82/100

    patsypppe/meridian#152 ·

    メンテナーはふだん 1 日以内に返信

  • Test snapshot digest resolution
    オープン
    area: tests good first issue size: S tests

    難易度 2/5 1〜3時間 初心者へのやさしさ 88/100

    patsypppe/meridian#151 ·

    メンテナーはふだん 1 日以内に返信

  • Test that replay detects a changed input
    オープン
    area: tests size: M tests

    難易度 2/5 1〜3時間 初心者へのやさしさ 85/100

    patsypppe/meridian#150 ·

    メンテナーはふだん 1 日以内に返信

  • Round-trip test for saving and loading a run archive
    オープン
    area: tests good first issue size: S tests

    難易度 2/5 1〜3時間 初心者へのやさしさ 85/100

    patsypppe/meridian#149 ·

    メンテナーはふだん 1 日以内に返信

  • Test configuration loading and environment overrides
    オープン
    area: tests good first issue size: S tests

    難易度 2/5 1〜3時間 初心者へのやさしさ 78/100

    patsypppe/meridian#148 ·

    メンテナーはふだん 1 日以内に返信

  • Unit-test the LangGraph adapter with a fake graph
    オープン
    area: agent area: tests good first issue size: S tests

    難易度 2/5 1〜3時間 初心者へのやさしさ 85/100

    patsypppe/meridian#147 ·

    メンテナーはふだん 1 日以内に返信

  • Unit-test the subprocess adapter
    オープン
    area: tests good first issue size: S tests

    難易度 2/5 1〜3時間 初心者へのやさしさ 86/100

    patsypppe/meridian#146 ·

    メンテナーはふだん 1 日以内に返信

  • Unit-test the in-container entrypoint
    オープン
    area: runtime area: tests good first issue size: S tests

    難易度 2/5 1〜3時間 初心者へのやさしさ 84/100

    patsypppe/meridian#145 ·

    メンテナーはふだん 1 日以内に返信

  • Write a threat model
    オープン
    area: docs area: security documentation size: M

    難易度 2/5 1〜3時間 初心者へのやさしさ 78/100

    patsypppe/meridian#143 ·

    メンテナーはふだん 1 日以内に返信

  • Drive the showcase page's real-model section from data
    オープン
    area: site enhancement size: S

    難易度 2/5 1〜3時間 初心者へのやさしさ 76/100

    patsypppe/meridian#142 ·

    メンテナーはふだん 1 日以内に返信

  • Remember the last loaded run
    オープン
    area: dashboard enhancement good first issue size: XS

    難易度 2/5 1〜3時間 初心者へのやさしさ 82/100

    patsypppe/meridian#141 ·

    メンテナーはふだん 1 日以内に返信

  • Light/dark toggle in the dashboard
    オープン
    area: dashboard enhancement good first issue size: S

    難易度 3/5 1〜2日 初心者へのやさしさ 67/100

    patsypppe/meridian#140 ·

    メンテナーはふだん 1 日以内に返信

  • Highlight the drop zone while dragging a file
    オープン
    accessibility area: dashboard enhancement good first issue size: XS

    難易度 2/5 1〜3時間 初心者へのやさしさ 85/100

    patsypppe/meridian#139 ·

    メンテナーはふだん 1 日以内に返信

  • Add an error boundary to the dashboard
    オープン
    area: dashboard enhancement good first issue size: XS

    難易度 2/5 1〜3時間 初心者へのやさしさ 82/100

    patsypppe/meridian#138 ·

    メンテナーはふだん 1 日以内に返信

  • Add ESLint and Prettier to the dashboard
    オープン
    area: ci area: dashboard enhancement good first issue size: S

    難易度 3/5 1〜2日 初心者へのやさしさ 75/100

    patsypppe/meridian#137 ·

    メンテナーはふだん 1 日以内に返信

  • Paired significance test in the comparison view
    オープン
    area: dashboard area: stats enhancement size: M

    難易度 4/5 3〜5日 初心者へのやさしさ 55/100

    patsypppe/meridian#136 ·

    メンテナーはふだん 1 日以内に返信

  • Export the task table and comparison
    オープン
    area: dashboard enhancement good first issue size: S

    難易度 2/5 1〜3時間 初心者へのやさしさ 84/100

    patsypppe/meridian#135 ·

    メンテナーはふだん 1 日以内に返信

  • Show efficiency numbers per task
    オープン
    area: dashboard enhancement good first issue size: S

    難易度 2/5 1〜3時間 初心者へのやさしさ 85/100

    patsypppe/meridian#134 ·

    メンテナーはふだん 1 日以内に返信

  • Show a trial's details when you click it
    オープン
    area: dashboard enhancement size: M

    難易度 2/5 1〜3時間 初心者へのやさしさ 84/100

    patsypppe/meridian#133 ·

    メンテナーはふだん 1 日以内に返信

  • Load a run in the dashboard from a URL
    オープン
    area: dashboard enhancement good first issue size: S

    難易度 3/5 1〜2日 初心者へのやさしさ 72/100

    patsypppe/meridian#132 ·

    メンテナーはふだん 1 日以内に返信

  • Recover efficiency numbers for timed-out trials
    オープン
    area: agent area: runtime enhancement size: S

    難易度 2/5 1〜3時間 初心者へのやさしさ 85/100

    patsypppe/meridian#131 ·

    メンテナーはふだん 1 日以内に返信

  • Make the terminal agent's limits configurable
    オープン
    area: agent enhancement good first issue size: S

    難易度 2/5 1〜3時間 初心者へのやさしさ 75/100

    patsypppe/meridian#130 ·

    メンテナーはふだん 1 日以内に返信

  • Keep the terminal agent's context bounded on long tasks
    オープン
    area: agent enhancement size: M

    難易度 2/5 1〜3時間 初心者へのやさしさ 82/100

    patsypppe/meridian#129 ·

    メンテナーはふだん 1 日以内に返信

  • Give the terminal agent a file-editing tool
    オープン
    area: agent enhancement size: M

    難易度 3/5 1〜2日 初心者へのやさしさ 75/100

    patsypppe/meridian#128 ·

    メンテナーはふだん 1 日以内に返信

  • Docstrings for the remaining packages, then turn the rule on
    オープン
    documentation good first issue size: S

    難易度 4/5 3〜5日 初心者へのやさしさ 55/100

    patsypppe/meridian#127 ·

    メンテナーはふだん 1 日以内に返信

  • Docstrings for `grading` and `manifest`
    オープン
    area: grading documentation good first issue size: S

    難易度 2/5 1〜3時間 初心者へのやさしさ 85/100

    patsypppe/meridian#126 ·

    メンテナーはふだん 1 日以内に返信

  • Docstrings for public APIs in `meridian.models`
    オープン
    documentation good first issue size: S

    難易度 3/5 1〜2日 初心者へのやさしさ 78/100

    patsypppe/meridian#125 ·

    メンテナーはふだん 1 日以内に返信

  • Docstrings for public APIs in `meridian.runtime`
    オープン
    area: runtime documentation good first issue size: S

    難易度 3/5 1〜2日 初心者へのやさしさ 76/100

    patsypppe/meridian#124 ·

    メンテナーはふだん 1 日以内に返信

  • Report run-to-run variance
    オープン
    area: stats enhancement needs discussion size: M

    難易度 5/5 1週間以上 初心者へのやさしさ 35/100

    patsypppe/meridian#123 ·

    メンテナーはふだん 1 日以内に返信

  • Detect flaky tasks across runs
    オープン
    area: gate enhancement size: M

    難易度 4/5 3〜5日 初心者へのやさしさ 55/100

    patsypppe/meridian#121 ·

    メンテナーはふだん 1 日以内に返信

  • Stop a gate run early once the verdict is settled
    オープン
    area: gate area: stats enhancement needs discussion size: L

    難易度 5/5 1週間以上 初心者へのやさしさ 35/100

    patsypppe/meridian#120 ·

    メンテナーはふだん 1 日以内に返信

  • Correct for multiple comparisons in the gate comment
    オープン
    area: gate area: stats enhancement size: M

    難易度 3/5 1〜2日 初心者へのやさしさ 72/100

    patsypppe/meridian#119 ·

    メンテナーはふだん 1 日以内に返信

  • Show a Wilson interval for each task
    オープン
    area: stats enhancement good first issue size: S

    難易度 3/5 1〜2日 初心者へのやさしさ 72/100

    patsypppe/meridian#118 ·

    メンテナーはふだん 1 日以内に返信

  • Option to grade a trial's final state after a timeout
    オープン
    area: grading enhancement needs discussion size: M

    難易度 4/5 3〜5日 初心者へのやさしさ 48/100

    patsypppe/meridian#117 ·

    メンテナーはふだん 1 日以内に返信

  • SQLite store for zero-setup local runs
    オープン
    area: store enhancement needs discussion size: L

    難易度 4/5 3〜5日 初心者へのやさしさ 52/100

    patsypppe/meridian#116 ·

    メンテナーはふだん 1 日以内に返信

  • Simplify the `gate` command
    オープン
    area: cli area: gate refactor size: S

    難易度 2/5 1〜3時間 初心者へのやさしさ 78/100

    patsypppe/meridian#115 ·

    メンテナーはふだん 1 日以内に返信

最新の 100 件のみ表示しています

このページには最近登録されたものだけが並びます。全件は詳細フィルターにあり、言語・難易度・所要時間で絞り込めます。

詳細フィルターへ

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。