patsypppe/meridian

Se connecter pour suivre Voir sur GitHub

Agent evaluation harness for CI. Grades from outside the container, reports pass^k instead of a mean, and tells you when the run could not have detected the regression.

patsypppe/meridian est-il accessible aux débutants ?

Les mainteneurs de patsypppe/meridian répondent en général à une pull request sous 1 jour. Aucune issue accessible aux débutants n'est ouverte pour l'instant ; la liste ci-dessous montre les autres issues que nous avons pour ce dépôt.

Étoiles
0
Forks
0
Issues débutants ouvertes
0
Issues indexées
127
Merge moyen
1 h 54 min
PR mergées (30 j)
14
Langage dominant
Python
Licence
MIT
Dernier push GitHub
4/11/2026
Dernière indexation
4/11/2026
Guide de contribution
Code de conduite
Labels débutants
good first issue help wanted

Comment contribuer à patsypppe/meridian

  1. Lisez d'abord le guide de contribution : il explique comment les mainteneurs veulent que les changements soient proposés, testés et relus.
  2. Il fournit un Dockerfile ou un fichier Docker Compose, vous pouvez donc le lancer sans installer toute sa chaîne d'outils.
  3. Lisez son code de conduite : il s'applique aux issues et aux pull requests autant qu'au chat.
  4. Suivez le dépôt pour savoir quand une nouvelle issue accessible aux débutants s'ouvre, ou parcourez les autres issues ci-dessous.
Accessible aux débutants Tout
Ouverte Toutes

Les issues sur lesquelles quelqu’un travaille peut-être déjà sont listées en dernier. Tout trier par date

  • Tests wanted: start here
    Ouverte
    • Quelque chose ne va pas ?
    area: tests help wanted tests

    Difficulté 1/5 Moins d'une heure Accessibilité débutants 25/100

    patsypppe/meridian#166 ·

    Les mainteneurs répondent en général sous 1 jour

  • Integration test: a credential never reaches a trial
    Ouverte
    • Quelque chose ne va pas ?
    area: security area: tests size: S tests

    Difficulté 2/5 1-3 heures Accessibilité débutants 84/100

    patsypppe/meridian#165 ·

    Les mainteneurs répondent en général sous 1 jour

  • Integration test: grader-only files never reach the trial
    Ouverte
    • Quelque chose ne va pas ?
    area: grading area: security area: tests size: M tests

    Difficulté 3/5 1-2 jours Accessibilité débutants 74/100

    patsypppe/meridian#164 ·

    Les mainteneurs répondent en général sous 1 jour

  • Detect flaky integration tests
    Ouverte
    • Quelque chose ne va pas ?
    area: ci size: S tests

    Difficulté 3/5 1-2 jours Accessibilité débutants 66/100

    patsypppe/meridian#163 ·

    Les mainteneurs répondent en général sous 1 jour

  • Run unit tests in random order
    Ouverte
    • Quelque chose ne va pas ?
    area: ci good first issue size: XS tests

    Difficulté 3/5 1-2 jours Accessibilité débutants 72/100

    patsypppe/meridian#162 ·

    Les mainteneurs répondent en général sous 1 jour

  • Mutation testing for the statistics module
    Ouverte
    • Quelque chose ne va pas ?
    area: stats area: tests help wanted size: M tests

    Difficulté 3/5 1-2 jours Accessibilité débutants 67/100

    patsypppe/meridian#161 ·

    Les mainteneurs répondent en général sous 1 jour

  • Dashboard: accept run files with extra fields
    Ouverte
    • Quelque chose ne va pas ?
    area: dashboard area: tests good first issue size: XS tests

    Difficulté 1/5 1-3 heures Accessibilité débutants 88/100

    patsypppe/meridian#160 ·

    Les mainteneurs répondent en général sous 1 jour

  • Component tests for the dashboard's charts and comparison
    Ouverte
    • Quelque chose ne va pas ?
    area: dashboard area: tests good first issue size: S tests

    Difficulté 2/5 1-3 heures Accessibilité débutants 76/100

    patsypppe/meridian#159 ·

    Les mainteneurs répondent en général sous 1 jour

  • Tests for the dashboard's formatting helpers
    Ouverte
    • Quelque chose ne va pas ?
    area: dashboard area: tests good first issue size: XS tests

    Difficulté 2/5 1-3 heures Accessibilité débutants 88/100

    patsypppe/meridian#158 ·

    Les mainteneurs répondent en général sous 1 jour

  • Test the gate comment with harness-error causes
    Ouverte
    • Quelque chose ne va pas ?
    area: gate area: tests good first issue size: S tests

    Difficulté 1/5 1-3 heures Accessibilité débutants 85/100

    patsypppe/meridian#157 ·

    Les mainteneurs répondent en général sous 1 jour

  • Test the HTML report with harness-error causes
    Ouverte
    • Quelque chose ne va pas ?
    area: tests good first issue size: S tests

    Difficulté 2/5 1-3 heures Accessibilité débutants 86/100

    patsypppe/meridian#156 ·

    Les mainteneurs répondent en général sous 1 jour

  • Golden tests for the importer against real Harbor tasks
    Ouverte
    • Quelque chose ne va pas ?
    area: importer area: tests help wanted size: M tests

    Difficulté 3/5 1-2 jours Accessibilité débutants 74/100

    patsypppe/meridian#155 ·

    Les mainteneurs répondent en général sous 1 jour

  • More translation cases for the OpenAI-compatible proxy
    Ouverte
    • Quelque chose ne va pas ?
    area: proxy area: tests good first issue size: S tests

    Difficulté 2/5 1-3 heures Accessibilité débutants 88/100

    patsypppe/meridian#154 ·

    Les mainteneurs répondent en général sous 1 jour

  • Test the grading sandbox's command construction
    Ouverte
    • Quelque chose ne va pas ?
    area: grading area: tests good first issue size: S tests

    Difficulté 2/5 1-3 heures Accessibilité débutants 75/100

    patsypppe/meridian#153 ·

    Les mainteneurs répondent en général sous 1 jour

  • Test how the proxy container's environment is built
    Ouverte
    • Quelque chose ne va pas ?
    area: proxy area: tests size: S tests

    Difficulté 2/5 1-3 heures Accessibilité débutants 82/100

    patsypppe/meridian#152 ·

    Les mainteneurs répondent en général sous 1 jour

  • Test snapshot digest resolution
    Ouverte
    • Quelque chose ne va pas ?
    area: tests good first issue size: S tests

    Difficulté 2/5 1-3 heures Accessibilité débutants 88/100

    patsypppe/meridian#151 ·

    Les mainteneurs répondent en général sous 1 jour

  • Test that replay detects a changed input
    Ouverte
    • Quelque chose ne va pas ?
    area: tests size: M tests

    Difficulté 2/5 1-3 heures Accessibilité débutants 85/100

    patsypppe/meridian#150 ·

    Les mainteneurs répondent en général sous 1 jour

  • Round-trip test for saving and loading a run archive
    Ouverte
    • Quelque chose ne va pas ?
    area: tests good first issue size: S tests

    Difficulté 2/5 1-3 heures Accessibilité débutants 85/100

    patsypppe/meridian#149 ·

    Les mainteneurs répondent en général sous 1 jour

  • Test configuration loading and environment overrides
    Ouverte
    • Quelque chose ne va pas ?
    area: tests good first issue size: S tests

    Difficulté 2/5 1-3 heures Accessibilité débutants 78/100

    patsypppe/meridian#148 ·

    Les mainteneurs répondent en général sous 1 jour

  • Unit-test the LangGraph adapter with a fake graph
    Ouverte
    • Quelque chose ne va pas ?
    area: agent area: tests good first issue size: S tests

    Difficulté 2/5 1-3 heures Accessibilité débutants 85/100

    patsypppe/meridian#147 ·

    Les mainteneurs répondent en général sous 1 jour

  • Unit-test the subprocess adapter
    Ouverte
    • Quelque chose ne va pas ?
    area: tests good first issue size: S tests

    Difficulté 2/5 1-3 heures Accessibilité débutants 86/100

    patsypppe/meridian#146 ·

    Les mainteneurs répondent en général sous 1 jour

  • Unit-test the in-container entrypoint
    Ouverte
    • Quelque chose ne va pas ?
    area: runtime area: tests good first issue size: S tests

    Difficulté 2/5 1-3 heures Accessibilité débutants 84/100

    patsypppe/meridian#145 ·

    Les mainteneurs répondent en général sous 1 jour

  • Write a threat model
    Ouverte
    • Quelque chose ne va pas ?
    area: docs area: security documentation size: M

    Difficulté 2/5 1-3 heures Accessibilité débutants 78/100

    patsypppe/meridian#143 ·

    Les mainteneurs répondent en général sous 1 jour

  • Drive the showcase page's real-model section from data
    Ouverte
    • Quelque chose ne va pas ?
    area: site enhancement size: S

    Difficulté 2/5 1-3 heures Accessibilité débutants 76/100

    patsypppe/meridian#142 ·

    Les mainteneurs répondent en général sous 1 jour

  • Remember the last loaded run
    Ouverte
    • Quelque chose ne va pas ?
    area: dashboard enhancement good first issue size: XS

    Difficulté 2/5 1-3 heures Accessibilité débutants 82/100

    patsypppe/meridian#141 ·

    Les mainteneurs répondent en général sous 1 jour

  • Light/dark toggle in the dashboard
    Ouverte
    • Quelque chose ne va pas ?
    area: dashboard enhancement good first issue size: S

    Difficulté 3/5 1-2 jours Accessibilité débutants 67/100

    patsypppe/meridian#140 ·

    Les mainteneurs répondent en général sous 1 jour

  • Highlight the drop zone while dragging a file
    Ouverte
    • Quelque chose ne va pas ?
    accessibility area: dashboard enhancement good first issue size: XS

    Difficulté 2/5 1-3 heures Accessibilité débutants 85/100

    patsypppe/meridian#139 ·

    Les mainteneurs répondent en général sous 1 jour

  • Add an error boundary to the dashboard
    Ouverte
    • Quelque chose ne va pas ?
    area: dashboard enhancement good first issue size: XS

    Difficulté 2/5 1-3 heures Accessibilité débutants 82/100

    patsypppe/meridian#138 ·

    Les mainteneurs répondent en général sous 1 jour

  • Add ESLint and Prettier to the dashboard
    Ouverte
    • Quelque chose ne va pas ?
    area: ci area: dashboard enhancement good first issue size: S

    Difficulté 3/5 1-2 jours Accessibilité débutants 75/100

    patsypppe/meridian#137 ·

    Les mainteneurs répondent en général sous 1 jour

  • Paired significance test in the comparison view
    Ouverte
    • Quelque chose ne va pas ?
    area: dashboard area: stats enhancement size: M

    Difficulté 4/5 3-5 jours Accessibilité débutants 55/100

    patsypppe/meridian#136 ·

    Les mainteneurs répondent en général sous 1 jour

  • Export the task table and comparison
    Ouverte
    • Quelque chose ne va pas ?
    area: dashboard enhancement good first issue size: S

    Difficulté 2/5 1-3 heures Accessibilité débutants 84/100

    patsypppe/meridian#135 ·

    Les mainteneurs répondent en général sous 1 jour

  • Show efficiency numbers per task
    Ouverte
    • Quelque chose ne va pas ?
    area: dashboard enhancement good first issue size: S

    Difficulté 2/5 1-3 heures Accessibilité débutants 85/100

    patsypppe/meridian#134 ·

    Les mainteneurs répondent en général sous 1 jour

  • Show a trial's details when you click it
    Ouverte
    • Quelque chose ne va pas ?
    area: dashboard enhancement size: M

    Difficulté 2/5 1-3 heures Accessibilité débutants 84/100

    patsypppe/meridian#133 ·

    Les mainteneurs répondent en général sous 1 jour

  • Load a run in the dashboard from a URL
    Ouverte
    • Quelque chose ne va pas ?
    area: dashboard enhancement good first issue size: S

    Difficulté 3/5 1-2 jours Accessibilité débutants 72/100

    patsypppe/meridian#132 ·

    Les mainteneurs répondent en général sous 1 jour

  • Recover efficiency numbers for timed-out trials
    Ouverte
    • Quelque chose ne va pas ?
    area: agent area: runtime enhancement size: S

    Difficulté 2/5 1-3 heures Accessibilité débutants 85/100

    patsypppe/meridian#131 ·

    Les mainteneurs répondent en général sous 1 jour

  • Make the terminal agent's limits configurable
    Ouverte
    • Quelque chose ne va pas ?
    area: agent enhancement good first issue size: S

    Difficulté 2/5 1-3 heures Accessibilité débutants 75/100

    patsypppe/meridian#130 ·

    Les mainteneurs répondent en général sous 1 jour

  • Keep the terminal agent's context bounded on long tasks
    Ouverte
    • Quelque chose ne va pas ?
    area: agent enhancement size: M

    Difficulté 2/5 1-3 heures Accessibilité débutants 82/100

    patsypppe/meridian#129 ·

    Les mainteneurs répondent en général sous 1 jour

  • Give the terminal agent a file-editing tool
    Ouverte
    • Quelque chose ne va pas ?
    area: agent enhancement size: M

    Difficulté 3/5 1-2 jours Accessibilité débutants 75/100

    patsypppe/meridian#128 ·

    Les mainteneurs répondent en général sous 1 jour

  • Docstrings for the remaining packages, then turn the rule on
    Ouverte
    • Quelque chose ne va pas ?
    documentation good first issue size: S

    Difficulté 4/5 3-5 jours Accessibilité débutants 55/100

    patsypppe/meridian#127 ·

    Les mainteneurs répondent en général sous 1 jour

  • Docstrings for `grading` and `manifest`
    Ouverte
    • Quelque chose ne va pas ?
    area: grading documentation good first issue size: S

    Difficulté 2/5 1-3 heures Accessibilité débutants 85/100

    patsypppe/meridian#126 ·

    Les mainteneurs répondent en général sous 1 jour

  • Docstrings for public APIs in `meridian.models`
    Ouverte
    • Quelque chose ne va pas ?
    documentation good first issue size: S

    Difficulté 3/5 1-2 jours Accessibilité débutants 78/100

    patsypppe/meridian#125 ·

    Les mainteneurs répondent en général sous 1 jour

  • Docstrings for public APIs in `meridian.runtime`
    Ouverte
    • Quelque chose ne va pas ?
    area: runtime documentation good first issue size: S

    Difficulté 3/5 1-2 jours Accessibilité débutants 76/100

    patsypppe/meridian#124 ·

    Les mainteneurs répondent en général sous 1 jour

  • Report run-to-run variance
    Ouverte
    • Quelque chose ne va pas ?
    area: stats enhancement needs discussion size: M

    Difficulté 5/5 Plus d'une semaine Accessibilité débutants 35/100

    patsypppe/meridian#123 ·

    Les mainteneurs répondent en général sous 1 jour

  • Detect flaky tasks across runs
    Ouverte
    • Quelque chose ne va pas ?
    area: gate enhancement size: M

    Difficulté 4/5 3-5 jours Accessibilité débutants 55/100

    patsypppe/meridian#121 ·

    Les mainteneurs répondent en général sous 1 jour

  • Stop a gate run early once the verdict is settled
    Ouverte
    • Quelque chose ne va pas ?
    area: gate area: stats enhancement needs discussion size: L

    Difficulté 5/5 Plus d'une semaine Accessibilité débutants 35/100

    patsypppe/meridian#120 ·

    Les mainteneurs répondent en général sous 1 jour

  • Correct for multiple comparisons in the gate comment
    Ouverte
    • Quelque chose ne va pas ?
    area: gate area: stats enhancement size: M

    Difficulté 3/5 1-2 jours Accessibilité débutants 72/100

    patsypppe/meridian#119 ·

    Les mainteneurs répondent en général sous 1 jour

  • Show a Wilson interval for each task
    Ouverte
    • Quelque chose ne va pas ?
    area: stats enhancement good first issue size: S

    Difficulté 3/5 1-2 jours Accessibilité débutants 72/100

    patsypppe/meridian#118 ·

    Les mainteneurs répondent en général sous 1 jour

  • Option to grade a trial's final state after a timeout
    Ouverte
    • Quelque chose ne va pas ?
    area: grading enhancement needs discussion size: M

    Difficulté 4/5 3-5 jours Accessibilité débutants 48/100

    patsypppe/meridian#117 ·

    Les mainteneurs répondent en général sous 1 jour

  • SQLite store for zero-setup local runs
    Ouverte
    • Quelque chose ne va pas ?
    area: store enhancement needs discussion size: L

    Difficulté 4/5 3-5 jours Accessibilité débutants 52/100

    patsypppe/meridian#116 ·

    Les mainteneurs répondent en général sous 1 jour

  • Simplify the `gate` command
    Ouverte
    • Quelque chose ne va pas ?
    area: cli area: gate refactor size: S

    Difficulté 2/5 1-3 heures Accessibilité débutants 78/100

    patsypppe/meridian#115 ·

    Les mainteneurs répondent en général sous 1 jour

Affichage des 100 plus récents

Cette page ne liste que les entrées les plus récentes. Le filtre avancé contient l'inventaire complet, affiné par langage, difficulté et durée.

Ouvrir le filtre avancé

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.