Owner

patsypppe

登入後關注

已索引 1 個儲存庫 · 在 GitHub 檢視

meridian
Agent evaluation harness for CI. Grades from outside the container, reports pass^k instead of a mean, and tells you when the run could no...

Python · 0 個 star

適合新手全部

未關閉全部

可能已有人在做的 issue 排在最後。全部依時間排序

Tests wanted: start here
未關閉
- 哪裡不對？
area: tests help wanted tests

難度 1/5 1 小時以內新手友好度 25/100

patsypppe/meridian#166 · 2026年11月4日建立

維護者通常 1 天內回覆
Integration test: a credential never reaches a trial
未關閉
- 哪裡不對？
area: security area: tests size: S tests

難度 2/5 1-3 小時新手友好度 84/100

patsypppe/meridian#165 · 2026年11月4日建立

維護者通常 1 天內回覆
Integration test: grader-only files never reach the trial
未關閉
- 哪裡不對？
area: grading area: security area: tests size: M tests

難度 3/5 1-2 天新手友好度 74/100

patsypppe/meridian#164 · 2026年11月4日建立

維護者通常 1 天內回覆
Detect flaky integration tests
未關閉
- 哪裡不對？
area: ci size: S tests

難度 3/5 1-2 天新手友好度 66/100

patsypppe/meridian#163 · 2026年11月4日建立

維護者通常 1 天內回覆
Run unit tests in random order
未關閉
- 哪裡不對？
area: ci good first issue size: XS tests

難度 3/5 1-2 天新手友好度 72/100

patsypppe/meridian#162 · 2026年11月4日建立

維護者通常 1 天內回覆
Mutation testing for the statistics module
未關閉
- 哪裡不對？
area: stats area: tests help wanted size: M tests

難度 3/5 1-2 天新手友好度 67/100

patsypppe/meridian#161 · 2026年11月4日建立

維護者通常 1 天內回覆
Dashboard: accept run files with extra fields
未關閉
- 哪裡不對？
area: dashboard area: tests good first issue size: XS tests

難度 1/5 1-3 小時新手友好度 88/100

patsypppe/meridian#160 · 2026年11月4日建立

維護者通常 1 天內回覆
Component tests for the dashboard's charts and comparison
未關閉
- 哪裡不對？
area: dashboard area: tests good first issue size: S tests

難度 2/5 1-3 小時新手友好度 76/100

patsypppe/meridian#159 · 2026年11月4日建立

維護者通常 1 天內回覆
Tests for the dashboard's formatting helpers
未關閉
- 哪裡不對？
area: dashboard area: tests good first issue size: XS tests

難度 2/5 1-3 小時新手友好度 88/100

patsypppe/meridian#158 · 2026年11月4日建立

維護者通常 1 天內回覆
Test the gate comment with harness-error causes
未關閉
- 哪裡不對？
area: gate area: tests good first issue size: S tests

難度 1/5 1-3 小時新手友好度 85/100

patsypppe/meridian#157 · 2026年11月4日建立

維護者通常 1 天內回覆
Test the HTML report with harness-error causes
未關閉
- 哪裡不對？
area: tests good first issue size: S tests

難度 2/5 1-3 小時新手友好度 86/100

patsypppe/meridian#156 · 2026年11月4日建立

維護者通常 1 天內回覆
Golden tests for the importer against real Harbor tasks
未關閉
- 哪裡不對？
area: importer area: tests help wanted size: M tests

難度 3/5 1-2 天新手友好度 74/100

patsypppe/meridian#155 · 2026年11月4日建立

維護者通常 1 天內回覆
More translation cases for the OpenAI-compatible proxy
未關閉
- 哪裡不對？
area: proxy area: tests good first issue size: S tests

難度 2/5 1-3 小時新手友好度 88/100

patsypppe/meridian#154 · 2026年11月4日建立

維護者通常 1 天內回覆
Test the grading sandbox's command construction
未關閉
- 哪裡不對？
area: grading area: tests good first issue size: S tests

難度 2/5 1-3 小時新手友好度 75/100

patsypppe/meridian#153 · 2026年11月4日建立

維護者通常 1 天內回覆
Test how the proxy container's environment is built
未關閉
- 哪裡不對？
area: proxy area: tests size: S tests

難度 2/5 1-3 小時新手友好度 82/100

patsypppe/meridian#152 · 2026年11月4日建立

維護者通常 1 天內回覆
Test snapshot digest resolution
未關閉
- 哪裡不對？
area: tests good first issue size: S tests

難度 2/5 1-3 小時新手友好度 88/100

patsypppe/meridian#151 · 2026年11月4日建立

維護者通常 1 天內回覆
Test that replay detects a changed input
未關閉
- 哪裡不對？
area: tests size: M tests

難度 2/5 1-3 小時新手友好度 85/100

patsypppe/meridian#150 · 2026年11月4日建立

維護者通常 1 天內回覆
Round-trip test for saving and loading a run archive
未關閉
- 哪裡不對？
area: tests good first issue size: S tests

難度 2/5 1-3 小時新手友好度 85/100

patsypppe/meridian#149 · 2026年11月4日建立

維護者通常 1 天內回覆
Test configuration loading and environment overrides
未關閉
- 哪裡不對？
area: tests good first issue size: S tests

難度 2/5 1-3 小時新手友好度 78/100

patsypppe/meridian#148 · 2026年11月4日建立

維護者通常 1 天內回覆
Unit-test the LangGraph adapter with a fake graph
未關閉
- 哪裡不對？
area: agent area: tests good first issue size: S tests

難度 2/5 1-3 小時新手友好度 85/100

patsypppe/meridian#147 · 2026年11月4日建立

維護者通常 1 天內回覆
Unit-test the subprocess adapter
未關閉
- 哪裡不對？
area: tests good first issue size: S tests

難度 2/5 1-3 小時新手友好度 86/100

patsypppe/meridian#146 · 2026年11月4日建立

維護者通常 1 天內回覆
Unit-test the in-container entrypoint
未關閉
- 哪裡不對？
area: runtime area: tests good first issue size: S tests

難度 2/5 1-3 小時新手友好度 84/100

patsypppe/meridian#145 · 2026年11月4日建立

維護者通常 1 天內回覆
Write a threat model
未關閉
- 哪裡不對？
area: docs area: security documentation size: M

難度 2/5 1-3 小時新手友好度 78/100

patsypppe/meridian#143 · 2026年11月4日建立

維護者通常 1 天內回覆
Drive the showcase page's real-model section from data
未關閉
- 哪裡不對？
area: site enhancement size: S

難度 2/5 1-3 小時新手友好度 76/100

patsypppe/meridian#142 · 2026年11月4日建立

維護者通常 1 天內回覆
Remember the last loaded run
未關閉
- 哪裡不對？
area: dashboard enhancement good first issue size: XS

難度 2/5 1-3 小時新手友好度 82/100

patsypppe/meridian#141 · 2026年11月4日建立

維護者通常 1 天內回覆
Light/dark toggle in the dashboard
未關閉
- 哪裡不對？
area: dashboard enhancement good first issue size: S

難度 3/5 1-2 天新手友好度 67/100

patsypppe/meridian#140 · 2026年11月4日建立

維護者通常 1 天內回覆
Highlight the drop zone while dragging a file
未關閉
- 哪裡不對？
accessibility area: dashboard enhancement good first issue size: XS

難度 2/5 1-3 小時新手友好度 85/100

patsypppe/meridian#139 · 2026年11月4日建立

維護者通常 1 天內回覆
Add an error boundary to the dashboard
未關閉
- 哪裡不對？
area: dashboard enhancement good first issue size: XS

難度 2/5 1-3 小時新手友好度 82/100

patsypppe/meridian#138 · 2026年11月4日建立

維護者通常 1 天內回覆
Add ESLint and Prettier to the dashboard
未關閉
- 哪裡不對？
area: ci area: dashboard enhancement good first issue size: S

難度 3/5 1-2 天新手友好度 75/100

patsypppe/meridian#137 · 2026年11月4日建立

維護者通常 1 天內回覆
Paired significance test in the comparison view
未關閉
- 哪裡不對？
area: dashboard area: stats enhancement size: M

難度 4/5 3-5 天新手友好度 55/100

patsypppe/meridian#136 · 2026年11月4日建立

維護者通常 1 天內回覆
Export the task table and comparison
未關閉
- 哪裡不對？
area: dashboard enhancement good first issue size: S

難度 2/5 1-3 小時新手友好度 84/100

patsypppe/meridian#135 · 2026年11月4日建立

維護者通常 1 天內回覆
Show efficiency numbers per task
未關閉
- 哪裡不對？
area: dashboard enhancement good first issue size: S

難度 2/5 1-3 小時新手友好度 85/100

patsypppe/meridian#134 · 2026年11月4日建立

維護者通常 1 天內回覆
Show a trial's details when you click it
未關閉
- 哪裡不對？
area: dashboard enhancement size: M

難度 2/5 1-3 小時新手友好度 84/100

patsypppe/meridian#133 · 2026年11月4日建立

維護者通常 1 天內回覆
Load a run in the dashboard from a URL
未關閉
- 哪裡不對？
area: dashboard enhancement good first issue size: S

難度 3/5 1-2 天新手友好度 72/100

patsypppe/meridian#132 · 2026年11月4日建立

維護者通常 1 天內回覆
Recover efficiency numbers for timed-out trials
未關閉
- 哪裡不對？
area: agent area: runtime enhancement size: S

難度 2/5 1-3 小時新手友好度 85/100

patsypppe/meridian#131 · 2026年11月4日建立

維護者通常 1 天內回覆
Make the terminal agent's limits configurable
未關閉
- 哪裡不對？
area: agent enhancement good first issue size: S

難度 2/5 1-3 小時新手友好度 75/100

patsypppe/meridian#130 · 2026年11月4日建立

維護者通常 1 天內回覆
Keep the terminal agent's context bounded on long tasks
未關閉
- 哪裡不對？
area: agent enhancement size: M

難度 2/5 1-3 小時新手友好度 82/100

patsypppe/meridian#129 · 2026年11月4日建立

維護者通常 1 天內回覆
Give the terminal agent a file-editing tool
未關閉
- 哪裡不對？
area: agent enhancement size: M

難度 3/5 1-2 天新手友好度 75/100

patsypppe/meridian#128 · 2026年11月4日建立

維護者通常 1 天內回覆
Docstrings for the remaining packages, then turn the rule on
未關閉
- 哪裡不對？
documentation good first issue size: S

難度 4/5 3-5 天新手友好度 55/100

patsypppe/meridian#127 · 2026年11月4日建立

維護者通常 1 天內回覆
Docstrings for `grading` and `manifest`
未關閉
- 哪裡不對？
area: grading documentation good first issue size: S

難度 2/5 1-3 小時新手友好度 85/100

patsypppe/meridian#126 · 2026年11月4日建立

維護者通常 1 天內回覆
Docstrings for public APIs in `meridian.models`
未關閉
- 哪裡不對？
documentation good first issue size: S

難度 3/5 1-2 天新手友好度 78/100

patsypppe/meridian#125 · 2026年11月4日建立

維護者通常 1 天內回覆
Docstrings for public APIs in `meridian.runtime`
未關閉
- 哪裡不對？
area: runtime documentation good first issue size: S

難度 3/5 1-2 天新手友好度 76/100

patsypppe/meridian#124 · 2026年11月4日建立

維護者通常 1 天內回覆
Report run-to-run variance
未關閉
- 哪裡不對？
area: stats enhancement needs discussion size: M

難度 5/5 一週以上新手友好度 35/100

patsypppe/meridian#123 · 2026年11月4日建立

維護者通常 1 天內回覆
Detect flaky tasks across runs
未關閉
- 哪裡不對？
area: gate enhancement size: M

難度 4/5 3-5 天新手友好度 55/100

patsypppe/meridian#121 · 2026年11月4日建立

維護者通常 1 天內回覆
Stop a gate run early once the verdict is settled
未關閉
- 哪裡不對？
area: gate area: stats enhancement needs discussion size: L

難度 5/5 一週以上新手友好度 35/100

patsypppe/meridian#120 · 2026年11月4日建立

維護者通常 1 天內回覆
Correct for multiple comparisons in the gate comment
未關閉
- 哪裡不對？
area: gate area: stats enhancement size: M

難度 3/5 1-2 天新手友好度 72/100

patsypppe/meridian#119 · 2026年11月4日建立

維護者通常 1 天內回覆
Show a Wilson interval for each task
未關閉
- 哪裡不對？
area: stats enhancement good first issue size: S

難度 3/5 1-2 天新手友好度 72/100

patsypppe/meridian#118 · 2026年11月4日建立

維護者通常 1 天內回覆
Option to grade a trial's final state after a timeout
未關閉
- 哪裡不對？
area: grading enhancement needs discussion size: M

難度 4/5 3-5 天新手友好度 48/100

patsypppe/meridian#117 · 2026年11月4日建立

維護者通常 1 天內回覆
SQLite store for zero-setup local runs
未關閉
- 哪裡不對？
area: store enhancement needs discussion size: L

難度 4/5 3-5 天新手友好度 52/100

patsypppe/meridian#116 · 2026年11月4日建立

維護者通常 1 天內回覆
Simplify the `gate` command
未關閉
- 哪裡不對？
area: cli area: gate refactor size: S

難度 2/5 1-3 小時新手友好度 78/100

patsypppe/meridian#115 · 2026年11月4日建立

維護者通常 1 天內回覆

只顯示最新的 100 筆

這個頁面只列出最近收錄的部分。完整清單在進階篩選裡，可以依語言、難度和預計耗時篩選。

前往進階篩選

patsypppe

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

哪裡不對？

只顯示最新的 100 筆

把新 issue 寄到你的電子郵件信箱