Add harder public tasks where the model alone fails
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 4/5
- Tiempo estimado
- 3-5 días
- Aptitud para principiantes
- 54/100
- Tipo de issue
- Nueva funcionalidad
- Claridad
- Bastante claro
- Estado de actividad
- Activo
- Stack tecnológico
- node.js, typescript
- Área
- ai-infra-agents, testing-qa
Línea de trabajo
Start by reading packages/bench/docs/TASK-FORMAT.md and the validation command node packages/bench/bin/apex-bench.mjs validate <dir>. Create public benchmark tasks with stated edge cases or multi-file, larger-project, or other-language requirements, ensuring every hidden assertion follows from the prompt and the work is original or openly licensed. Run the validator on the task directory; done means the tasks include cases where a strong model alone can fail some runs.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
On the first round every public task is passed by the model alone, so the engine's proof gate has nothing to prove. We need tasks (multi-file changes, subtle edge cases the prompt DOES state, larger projects, Python/other languages) where a strong model alone fails some runs. Format: packages/bench/docs/TASK-FORMAT.md. Rules: every hidden assertion must follow from the prompt; validate with node packages/bench/bin/apex-bench.mjs validate <dir>; tasks must be your own work or openly licensed.
- Lenguaje dominante
- TypeScript
- Estrellas
- 1
- Forks
- 0
- Métricas de merge de PR
- Sin PR fusionados en 30 d
Preparar el entorno
- Sin Dockerfile ni archivo de Docker Compose
- Tiene una plantilla de pull request
- Leer la guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de apex-context-dev/apex-engine
-
docs good first issue
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
-
enhancement good first issue
Dificultad 2/5 1-3 horas Aptitud para principiantes 82/100
-
good first issue profile
Dificultad 2/5 1-3 horas Aptitud para principiantes 72/100
-
hardware help wanted
Dificultad 2/5 1-3 horas Aptitud para principiantes 66/100
-
good first issue profile
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
Todos los issues de apex-context-dev/apex-engine
Issues similares
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 92/100
liberation-data/drivine#826 ·
Los mantenedores suelen responder en 1 día
-
【优化】“打开文件列表”,建议对当前文件进行高对比度标注Abierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 65/100
zhitongblog/solomd#623 ·
Los mantenedores suelen responder en 1 día
-
aufwand: klein documentation Einsteiger-Familie freigegeben Haushalts-Admin
Dificultad 2/5 1-3 horas Aptitud para principiantes 84/100
Los mantenedores suelen responder en 1 día
-
enhancement frontend
Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100
openwallet-foundation/eudiplo#1600 ·
-
docs(website): add a GitLab CI/CD button next to the GitHub Action button on the homepagePosiblemente ocupada @shryssssss-maker la tomó hoy. Abiertodocumentation enhancement first-timers-only good first issue
Dificultad 1/5 1-3 horas Aptitud para principiantes 88/100
OWASP/cve-lite-cli#1739 · 2 comentarios ·
Los mantenedores suelen responder en 2 días