Build the port inside evals
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 5/5
- Tiempo estimado
- Más de una semana
- Aptitud para principiantes
- 35/100
Línea de trabajo
Read ROADMAP.md, SKILL.md step 5, and the existing CI configuration that builds SDL 3.4.18 with CMake. First review the turn-limit issue referenced as #2 and the current eval cases to understand the tradeoffs. Done means the settled answers are recorded as a dated decision in ROADMAP.md and the issue has a milestone with its own checklist.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
Install SDL3 on the eval runner, so the agent can build its port and run it headless, as the skill does on a real machine. Graders could then check that the port runs, not just what it says.
Building adds turns: Haiku 4.5 already reaches the 60-turn limit in 3 of 5 whole-program runs.
What has to be settled before this gets a milestone
- What a build would prove. M3 kept builds out of evals because a trap compiles cleanly by definition, so a build changes no trap score, and graders can't see whether a build succeeded.
SKILL.mdstep 5's syntax check against the bundled headers already catches compile errors. The gain is graders that check the port runs: a headless run whose output a grader reads, beside the regex graders on the files. - Turns. Either the build cases get their own, higher turn limit, or building stays out of the single-trap cases and only the whole-program case builds. Haiku's turn count (#2) should settle first.
- Getting SDL3 onto the runner. CI already builds SDL 3.4.18 with CMake. The eval sandbox needs the same version prebuilt, so a run doesn't spend minutes and turns building SDL.
Done when
- The settled answers are a dated decision in ROADMAP.md, and this issue gets a milestone with its own checklist.
- Lenguaje dominante
- C
- Estrellas
- 1
- Forks
- 1
- Merge medio
- 3 min
- PR fusionados (30 d)
- 1
Preparar el entorno
- Sin Dockerfile ni archivo de Docker Compose
- Sin plantilla de pull request
- Leer la guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de hazeliscoding/sdl3-porter
-
trap-cards check: require every part of a trap cardPosiblemente ocupada Un pull request vinculado a esta issue está abierto o ya se fusionó. Abiertoenhancement good first issue
Dificultad 2/5 1-3 horas Aptitud para principiantes 88/100
hazeliscoding/sdl3-porter#20 ·
-
documentation good first issue
Dificultad 1/5 1-3 horas Aptitud para principiantes 83/100
hazeliscoding/sdl3-porter#19 ·
-
Test find_traps.py's search of the committed SDL2 codePosiblemente ocupada @ian0318git la tomó hace 3 días. Abiertogood first issue
Dificultad 2/5 1-3 horas Aptitud para principiantes 86/100
hazeliscoding/sdl3-porter#18 ·
-
bug good first issue
Dificultad 2/5 1-3 horas Aptitud para principiantes 90/100
hazeliscoding/sdl3-porter#17 ·
-
trap-cards check: require a sample and an eval case for every trapPosiblemente ocupada Un pull request vinculado a esta issue está abierto o ya se fusionó. Abiertoenhancement good first issue
Dificultad 3/5 1-2 días Aptitud para principiantes 82/100
hazeliscoding/sdl3-porter#21 ·
Todos los issues de hazeliscoding/sdl3-porter
Issues similares
-
Dificultad 1/5 1-3 horas Aptitud para principiantes 90/100
Lakr233/vphone-cli#743 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
libsdl-org/SDL#16584 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 82/100
Los mantenedores suelen responder en 1 día
-
bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 63/100
FriendsofECCE/ECCE#519 · 2 comentarios ·
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 95/100
containers/crun#2415 ·
Los mantenedores suelen responder en 1 día