pylint-dev/pylint

Add randomization to test suite to find test isolation problems

Open

#9.063 aberto em 24 de set. de 2023

Ver no GitHub
 (1 comment) (0 reactions) (0 assignees)Python (1.059 forks)batch import
Good first issueHacktoberfestNeeds PRtests

Métricas do repositório

Stars
 (4.978 stars)
Métricas de merge de PR
 (Mesclagem média 58d 21h) (63 fundiu PRs em 30d)

Description

We can tackle test isolation issues in future work by adding a pytest plugin or some other solution for shuffling test cases.

Originally posted by @jacobtylerwalls in https://github.com/pylint-dev/pylint/issues/9041#issuecomment-1732605038

I'm familiar with the Django test runner's --shuffle option, but perhaps we can evaluate pytest-random-order or other plugins.

Guia do colaborador

Direção de pesquisa
Investigue os plugins pytest existentes, como pytest random order ou pytest randomly. Avalie a integração com a suíte de testes do pylint. Possivelmente adicione uma opção de configuração para habilitar a randomização. Revise o comentário referenciado na issue #9041 para contexto.
Pilha de tecnologia
python
Domain
testing
Tipo Issue
Funcionalidade
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
3
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
Meio dia
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Recente
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Claro
Prerequisites
Pythonpytest basics
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
70