ncu-ci walk: exclude PR-modified tests from the flaky count
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 3/5
- Tiempo estimado
- 1-2 días
- Aptitud para principiantes
- 65/100
- Tipo de issue
- Error
- Claridad
- Bastante claro
- Estado de actividad
- Tranquilo
- Stack tecnológico
- javascript
Línea de trabajo
Comienza con la lógica de recorrido de ncu-ci que calcula los flaky counts y los informes de fiabilidad, y luego sigue cómo se asocia cada ocurrencia con la revisión del PR probado. Usa el ejemplo test-ffi-fast-buffer.js y CI build 75799 como caso de referencia; el trabajo estará terminado cuando las ocurrencias cuyo archivo de test haya sido modificado por el PR ya no contribuyan al flaky count.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
Current Behavior
Failures currently contribute to the flaky count even when the PR modified the failing test. Such failures are likely caused by the PR and should not count as independent flaky occurrences.
For example, CI build 75799 failed test-ffi-fast-buffer, but the PR modified test/ffi/test-ffi-fast-buffer.js. Excluding this occurrence would leave only one qualifying PR, so the test would not appear in the reliability report:
https://github.com/nodejs/reliability/blob/main/reports/2026-08-15.md
Expected Behavior
Exclude an occurrence from the flaky count when its test file was modified by the tested PR revision.
- Lenguaje dominante
- JavaScript
- Estrellas
- 313
- Forks
- 137
- Merge medio
- 2 d 8 h
- PR fusionados (30 d)
- 24
Guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de nodejs/node-core-utils
-
bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 62/100
nodejs/node-core-utils#664 · 1 comentario ·
-
Dificultad 4/5 3-5 días Aptitud para principiantes 68/100
nodejs/node-core-utils#1160 · 3 comentarios ·
-
Dificultad 3/5 1-2 días Aptitud para principiantes 68/100
nodejs/node-core-utils#1151 ·
-
Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100
nodejs/node-core-utils#1063 ·
-
Dificultad 4/5 3-5 días Aptitud para principiantes 35/100
nodejs/node-core-utils#967 · 4 comentarios ·
Todos los issues de nodejs/node-core-utils
Issues similares
-
curation good first issue
Dificultad 2/5 1-3 horas Aptitud para principiantes 88/100
amponce/archive-movie-browser#186 ·
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 86/100
clerk/javascript#9852 ·
-
bug p1 tools
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 88/100
HarperFast/skills#96 ·
-
factory-active factory-automatic task-bug-reproduction-cannot-reproduce task-identify-harness-labels-done task-identify-issue-type-done
Dificultad 2/5 1-3 horas Aptitud para principiantes 84/100