Agent evaluation harness for CI. Grades from outside the container, reports pass^k instead of a mean, and tells you when the run could not have detected the regression.

patsypppe/meridian è adatto ai principianti?

I maintainer di patsypppe/meridian di solito rispondono a una pull request entro 1 giorno. Al momento non è aperta nessuna issue adatta ai principianti; l'elenco qui sotto mostra le altre issue che abbiamo per questo repository.

Stelle
0
Fork
0
Issue aperte per principianti
0
Issue indicizzate
127
Merge medio
1h 54m
PR unite (30g)
14
Lingua principale
Python
Licenza
MIT
Ultimo push su GitHub
4/11/2026
Ultima indicizzazione
4/11/2026
Guida per i contributori
Guida per i contributori
Codice di condotta
Codice di condotta
Label per principianti
good first issue help wanted

Come contribuire a patsypppe/meridian

  1. Leggi prima la guida per contribuire: spiega come i maintainer vogliono che le modifiche siano proposte, testate e revisionate.
  2. Include un Dockerfile o un file Docker Compose, quindi puoi avviarlo senza installare tutta la sua toolchain.
  3. Leggi il suo codice di condotta: vale per issue e pull request tanto quanto per la chat.
  4. Segui il repository per sapere quando si apre una nuova issue adatta ai principianti, oppure guarda le altre issue qui sotto.
Caricamento delle issue

Le issue su cui forse qualcuno sta già lavorando sono in fondo alla lista. Ordina tutto per data

  • Tests wanted: start here
    Aperta
    area: tests help wanted tests

    Difficoltà 1/5 Meno di un'ora Idoneità per principianti 25/100

    patsypppe/meridian#166 ·

    I maintainer di solito rispondono entro 1 giorno

  • Integration test: a credential never reaches a trial
    Aperta
    area: security area: tests size: S tests

    Difficoltà 2/5 1-3 ore Idoneità per principianti 84/100

    patsypppe/meridian#165 ·

    I maintainer di solito rispondono entro 1 giorno

  • Integration test: grader-only files never reach the trial
    Aperta
    area: grading area: security area: tests size: M tests

    Difficoltà 3/5 1-2 giorni Idoneità per principianti 74/100

    patsypppe/meridian#164 ·

    I maintainer di solito rispondono entro 1 giorno

  • Detect flaky integration tests
    Aperta
    area: ci size: S tests

    Difficoltà 3/5 1-2 giorni Idoneità per principianti 66/100

    patsypppe/meridian#163 ·

    I maintainer di solito rispondono entro 1 giorno

  • Run unit tests in random order
    Aperta
    area: ci good first issue size: XS tests

    Difficoltà 3/5 1-2 giorni Idoneità per principianti 72/100

    patsypppe/meridian#162 ·

    I maintainer di solito rispondono entro 1 giorno

  • Mutation testing for the statistics module
    Aperta
    area: stats area: tests help wanted size: M tests

    Difficoltà 3/5 1-2 giorni Idoneità per principianti 67/100

    patsypppe/meridian#161 ·

    I maintainer di solito rispondono entro 1 giorno

  • Dashboard: accept run files with extra fields
    Aperta
    area: dashboard area: tests good first issue size: XS tests

    Difficoltà 1/5 1-3 ore Idoneità per principianti 88/100

    patsypppe/meridian#160 ·

    I maintainer di solito rispondono entro 1 giorno

  • Component tests for the dashboard's charts and comparison
    Aperta
    area: dashboard area: tests good first issue size: S tests

    Difficoltà 2/5 1-3 ore Idoneità per principianti 76/100

    patsypppe/meridian#159 ·

    I maintainer di solito rispondono entro 1 giorno

  • Tests for the dashboard's formatting helpers
    Aperta
    area: dashboard area: tests good first issue size: XS tests

    Difficoltà 2/5 1-3 ore Idoneità per principianti 88/100

    patsypppe/meridian#158 ·

    I maintainer di solito rispondono entro 1 giorno

  • Test the gate comment with harness-error causes
    Aperta
    area: gate area: tests good first issue size: S tests

    Difficoltà 1/5 1-3 ore Idoneità per principianti 85/100

    patsypppe/meridian#157 ·

    I maintainer di solito rispondono entro 1 giorno

  • Test the HTML report with harness-error causes
    Aperta
    area: tests good first issue size: S tests

    Difficoltà 2/5 1-3 ore Idoneità per principianti 86/100

    patsypppe/meridian#156 ·

    I maintainer di solito rispondono entro 1 giorno

  • Golden tests for the importer against real Harbor tasks
    Aperta
    area: importer area: tests help wanted size: M tests

    Difficoltà 3/5 1-2 giorni Idoneità per principianti 74/100

    patsypppe/meridian#155 ·

    I maintainer di solito rispondono entro 1 giorno

  • More translation cases for the OpenAI-compatible proxy
    Aperta
    area: proxy area: tests good first issue size: S tests

    Difficoltà 2/5 1-3 ore Idoneità per principianti 88/100

    patsypppe/meridian#154 ·

    I maintainer di solito rispondono entro 1 giorno

  • Test the grading sandbox's command construction
    Aperta
    area: grading area: tests good first issue size: S tests

    Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100

    patsypppe/meridian#153 ·

    I maintainer di solito rispondono entro 1 giorno

  • Test how the proxy container's environment is built
    Aperta
    area: proxy area: tests size: S tests

    Difficoltà 2/5 1-3 ore Idoneità per principianti 82/100

    patsypppe/meridian#152 ·

    I maintainer di solito rispondono entro 1 giorno

  • Test snapshot digest resolution
    Aperta
    area: tests good first issue size: S tests

    Difficoltà 2/5 1-3 ore Idoneità per principianti 88/100

    patsypppe/meridian#151 ·

    I maintainer di solito rispondono entro 1 giorno

  • Test that replay detects a changed input
    Aperta
    area: tests size: M tests

    Difficoltà 2/5 1-3 ore Idoneità per principianti 85/100

    patsypppe/meridian#150 ·

    I maintainer di solito rispondono entro 1 giorno

  • Round-trip test for saving and loading a run archive
    Aperta
    area: tests good first issue size: S tests

    Difficoltà 2/5 1-3 ore Idoneità per principianti 85/100

    patsypppe/meridian#149 ·

    I maintainer di solito rispondono entro 1 giorno

  • Test configuration loading and environment overrides
    Aperta
    area: tests good first issue size: S tests

    Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100

    patsypppe/meridian#148 ·

    I maintainer di solito rispondono entro 1 giorno

  • Unit-test the LangGraph adapter with a fake graph
    Aperta
    area: agent area: tests good first issue size: S tests

    Difficoltà 2/5 1-3 ore Idoneità per principianti 85/100

    patsypppe/meridian#147 ·

    I maintainer di solito rispondono entro 1 giorno

  • Unit-test the subprocess adapter
    Aperta
    area: tests good first issue size: S tests

    Difficoltà 2/5 1-3 ore Idoneità per principianti 86/100

    patsypppe/meridian#146 ·

    I maintainer di solito rispondono entro 1 giorno

  • Unit-test the in-container entrypoint
    Aperta
    area: runtime area: tests good first issue size: S tests

    Difficoltà 2/5 1-3 ore Idoneità per principianti 84/100

    patsypppe/meridian#145 ·

    I maintainer di solito rispondono entro 1 giorno

  • Write a threat model
    Aperta
    area: docs area: security documentation size: M

    Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100

    patsypppe/meridian#143 ·

    I maintainer di solito rispondono entro 1 giorno

  • Drive the showcase page's real-model section from data
    Aperta
    area: site enhancement size: S

    Difficoltà 2/5 1-3 ore Idoneità per principianti 76/100

    patsypppe/meridian#142 ·

    I maintainer di solito rispondono entro 1 giorno

  • Remember the last loaded run
    Aperta
    area: dashboard enhancement good first issue size: XS

    Difficoltà 2/5 1-3 ore Idoneità per principianti 82/100

    patsypppe/meridian#141 ·

    I maintainer di solito rispondono entro 1 giorno

  • Light/dark toggle in the dashboard
    Aperta
    area: dashboard enhancement good first issue size: S

    Difficoltà 3/5 1-2 giorni Idoneità per principianti 67/100

    patsypppe/meridian#140 ·

    I maintainer di solito rispondono entro 1 giorno

  • Highlight the drop zone while dragging a file
    Aperta
    accessibility area: dashboard enhancement good first issue size: XS

    Difficoltà 2/5 1-3 ore Idoneità per principianti 85/100

    patsypppe/meridian#139 ·

    I maintainer di solito rispondono entro 1 giorno

  • Add an error boundary to the dashboard
    Aperta
    area: dashboard enhancement good first issue size: XS

    Difficoltà 2/5 1-3 ore Idoneità per principianti 82/100

    patsypppe/meridian#138 ·

    I maintainer di solito rispondono entro 1 giorno

  • Add ESLint and Prettier to the dashboard
    Aperta
    area: ci area: dashboard enhancement good first issue size: S

    Difficoltà 3/5 1-2 giorni Idoneità per principianti 75/100

    patsypppe/meridian#137 ·

    I maintainer di solito rispondono entro 1 giorno

  • Paired significance test in the comparison view
    Aperta
    area: dashboard area: stats enhancement size: M

    Difficoltà 4/5 3-5 giorni Idoneità per principianti 55/100

    patsypppe/meridian#136 ·

    I maintainer di solito rispondono entro 1 giorno

  • Export the task table and comparison
    Aperta
    area: dashboard enhancement good first issue size: S

    Difficoltà 2/5 1-3 ore Idoneità per principianti 84/100

    patsypppe/meridian#135 ·

    I maintainer di solito rispondono entro 1 giorno

  • Show efficiency numbers per task
    Aperta
    area: dashboard enhancement good first issue size: S

    Difficoltà 2/5 1-3 ore Idoneità per principianti 85/100

    patsypppe/meridian#134 ·

    I maintainer di solito rispondono entro 1 giorno

  • Show a trial's details when you click it
    Aperta
    area: dashboard enhancement size: M

    Difficoltà 2/5 1-3 ore Idoneità per principianti 84/100

    patsypppe/meridian#133 ·

    I maintainer di solito rispondono entro 1 giorno

  • Load a run in the dashboard from a URL
    Aperta
    area: dashboard enhancement good first issue size: S

    Difficoltà 3/5 1-2 giorni Idoneità per principianti 72/100

    patsypppe/meridian#132 ·

    I maintainer di solito rispondono entro 1 giorno

  • Recover efficiency numbers for timed-out trials
    Aperta
    area: agent area: runtime enhancement size: S

    Difficoltà 2/5 1-3 ore Idoneità per principianti 85/100

    patsypppe/meridian#131 ·

    I maintainer di solito rispondono entro 1 giorno

  • Make the terminal agent's limits configurable
    Aperta
    area: agent enhancement good first issue size: S

    Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100

    patsypppe/meridian#130 ·

    I maintainer di solito rispondono entro 1 giorno

  • Keep the terminal agent's context bounded on long tasks
    Aperta
    area: agent enhancement size: M

    Difficoltà 2/5 1-3 ore Idoneità per principianti 82/100

    patsypppe/meridian#129 ·

    I maintainer di solito rispondono entro 1 giorno

  • Give the terminal agent a file-editing tool
    Aperta
    area: agent enhancement size: M

    Difficoltà 3/5 1-2 giorni Idoneità per principianti 75/100

    patsypppe/meridian#128 ·

    I maintainer di solito rispondono entro 1 giorno

  • Docstrings for the remaining packages, then turn the rule on
    Aperta
    documentation good first issue size: S

    Difficoltà 4/5 3-5 giorni Idoneità per principianti 55/100

    patsypppe/meridian#127 ·

    I maintainer di solito rispondono entro 1 giorno

  • Docstrings for `grading` and `manifest`
    Aperta
    area: grading documentation good first issue size: S

    Difficoltà 2/5 1-3 ore Idoneità per principianti 85/100

    patsypppe/meridian#126 ·

    I maintainer di solito rispondono entro 1 giorno

  • Docstrings for public APIs in `meridian.models`
    Aperta
    documentation good first issue size: S

    Difficoltà 3/5 1-2 giorni Idoneità per principianti 78/100

    patsypppe/meridian#125 ·

    I maintainer di solito rispondono entro 1 giorno

  • Docstrings for public APIs in `meridian.runtime`
    Aperta
    area: runtime documentation good first issue size: S

    Difficoltà 3/5 1-2 giorni Idoneità per principianti 76/100

    patsypppe/meridian#124 ·

    I maintainer di solito rispondono entro 1 giorno

  • Report run-to-run variance
    Aperta
    area: stats enhancement needs discussion size: M

    Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

    patsypppe/meridian#123 ·

    I maintainer di solito rispondono entro 1 giorno

  • Detect flaky tasks across runs
    Aperta
    area: gate enhancement size: M

    Difficoltà 4/5 3-5 giorni Idoneità per principianti 55/100

    patsypppe/meridian#121 ·

    I maintainer di solito rispondono entro 1 giorno

  • Stop a gate run early once the verdict is settled
    Aperta
    area: gate area: stats enhancement needs discussion size: L

    Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

    patsypppe/meridian#120 ·

    I maintainer di solito rispondono entro 1 giorno

  • Correct for multiple comparisons in the gate comment
    Aperta
    area: gate area: stats enhancement size: M

    Difficoltà 3/5 1-2 giorni Idoneità per principianti 72/100

    patsypppe/meridian#119 ·

    I maintainer di solito rispondono entro 1 giorno

  • Show a Wilson interval for each task
    Aperta
    area: stats enhancement good first issue size: S

    Difficoltà 3/5 1-2 giorni Idoneità per principianti 72/100

    patsypppe/meridian#118 ·

    I maintainer di solito rispondono entro 1 giorno

  • Option to grade a trial's final state after a timeout
    Aperta
    area: grading enhancement needs discussion size: M

    Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

    patsypppe/meridian#117 ·

    I maintainer di solito rispondono entro 1 giorno

  • SQLite store for zero-setup local runs
    Aperta
    area: store enhancement needs discussion size: L

    Difficoltà 4/5 3-5 giorni Idoneità per principianti 52/100

    patsypppe/meridian#116 ·

    I maintainer di solito rispondono entro 1 giorno

  • Simplify the `gate` command
    Aperta
    area: cli area: gate refactor size: S

    Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100

    patsypppe/meridian#115 ·

    I maintainer di solito rispondono entro 1 giorno

Vengono mostrati i 100 più recenti

Questa pagina elenca solo ciò che è stato indicizzato di recente. Il filtro avanzato contiene l'inventario completo, ristretto per linguaggio, difficoltà e durata.

Apri il filtro avanzato

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.