pylint-dev/pylint

Add randomization to test suite to find test isolation problems

Aperta

#9063 aperta il 24 set 2023

Vedi su GitHubGuida contributor
 (1 commento) (0 reazioni) (0 assegnatari)Python (1059 fork)batch import
Good first issueHacktoberfestNeeds PRtests

Metriche repository

Star
 (4978 stelle)
Metriche merge PR
 (Metriche PR in attesa)

Descrizione

We can tackle test isolation issues in future work by adding a pytest plugin or some other solution for shuffling test cases.

Originally posted by @jacobtylerwalls in https://github.com/pylint-dev/pylint/issues/9041#issuecomment-1732605038

I'm familiar with the Django test runner's --shuffle option, but perhaps we can evaluate pytest-random-order or other plugins.

Guida contributor

Direzione di ricerca
Valuta il plugin pytest random order o implementa shuffle simile al test runner di Django. Considera i casi limite e i conflitti con l'ordinamento dei test esistente.
Tech stack
python
Dominio
testingdeveloper experience
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Mezza giornata
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
Pythonpytest
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
65