(optionally) run the full test suite on any "surviving" mutants to confirm

Abierto
#535 3 comentarios 0 reacciones 0 asignados Ver en GitHub

Los mantenedores suelen responder en 1 día

Nadie ha tomado este issue todavía.

Evaluación

Dificultad
4/5
Tiempo estimado
3-5 días
Aptitud para principiantes
48/100
Tipo de issue
Nueva funcionalidad
Claridad
Bastante claro
Estado de actividad
Tranquilo
Stack tecnológico
python
Área
testing-qa

Línea de trabajo

No se indica ningún archivo ni punto de entrada de pruebas. Empieza por rastrear cómo mutmut selecciona las pruebas para cada mutante y cómo registra los supervivientes; después, identifica la ruta de comandos existente para la suite completa de pruebas. El trabajo estará terminado cuando una configuración opcional vuelva a ejecutar la suite completa solo para los mutantes que sobrevivieron inicialmente y distinga los supervivientes confirmados de los mutantes eliminados por esa nueva ejecución.

Escrito por el modelo de indexación a partir del texto del issue.

Descripción

Sometimes for weird 3rd-party-library doing something funky stuff reasons, the way mutmut uses coverage to determine the subset of unit tests to run on a mutant isn't fully accurate. (I personally ran into a case where FastAPI was generating the OpenAPI schema file, and my tests did some assertions about that, but mutmut didn't autodetect that the mutations it made would impact the OpenAPI schema file)

It seems like it might be helpful to have an option for mutmut to automatically run the full test suite on any mutants that survived the initial screen in order to confirm they are true survivors, and not just that they survive the subset of tests most likely determined to be able to kill them.

Lenguaje dominante
Python
Estrellas
1.5k
Forks
190
Merge medio
1 d 11 h
PR fusionados (30 d)
8

Preparar el entorno

Primeros pasos

  1. Lee el issue completo y luego la guía de contribución del proyecto.
  2. Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
  3. Haz un fork del repositorio y trabaja en una rama.
  4. Abre un pull request que haga referencia al número del issue.

Más de boxed/mutmut

Todos los issues de boxed/mutmut

Issues similares

Más issues de Python

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.