Parameterized tests cannot be ordered
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 45/100
Direzione di ricerca
Inizia con l'esempio collegato di parametrizzazione di pytest e riproducilo usando le opzioni mostrate --order-scope=class e --order-group-scope=class. Traccia come vengono raccolti e ordinati gli scenari parametrizzati; il lavoro è completato quando l'esecuzione con scope di classe produce demo2[basic], demo1[basic], demo2[advanced], demo1[advanced], con copertura di regressione per questo ordinamento.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Considering the example in pytest documentation:
https://pytest.org/en/6.2.x/example/parametrize.html#a-quick-port-of-testscenarios
If I include ordering:
scenario1 = ("basic", {"attribute": "value"})
scenario2 = ("advanced", {"attribute": "value2"})
class TestSampleWithScenarios:
scenarios = [scenario1, scenario2]
@pytest.mark.order(2)
def test_demo1(self, attribute):
assert isinstance(attribute, str)
@pytest.mark.order(1)
def test_demo2(self, attribute):
assert isinstance(attribute, str)
I would expect this order:
test_scenarios.py::TestSampleWithScenarios::test_demo2[basic] PASSED [ 25%]
test_scenarios.py::TestSampleWithScenarios::test_demo1[basic] PASSED [ 50%]
test_scenarios.py::TestSampleWithScenarios::test_demo2[advanced] PASSED [ 75%]
test_scenarios.py::TestSampleWithScenarios::test_demo1[advanced] PASSED [100%]
But I get instead:
test_scenarios.py::TestSampleWithScenarios::test_demo2[basic] PASSED [ 25%]
test_scenarios.py::TestSampleWithScenarios::test_demo2[advanced] PASSED [ 50%]
test_scenarios.py::TestSampleWithScenarios::test_demo1[basic] PASSED [ 75%]
test_scenarios.py::TestSampleWithScenarios::test_demo1[advanced] PASSED [100%]
I have tried with --order-scope=class and --order-group-scope=class but they dont fix this.
- Lingua principale
- Python
- Stelle
- 210
- Fork
- 17
- Merge medio
- 1g 1h
- PR unite (30g)
- 4
Preparare l'ambiente
Non abbiamo ancora controllato i file di configurazione di questo progetto. Parti dal suo README e consulta la nostra guida al primo contributo per i passaggi generali.
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di pytest-dev/pytest-order
-
enhancement
Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100
pytest-dev/pytest-order#64 · 5 commenti ·
-
enhancement
Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100
pytest-dev/pytest-order#51 · 6 commenti · 1 reazione ·
-
enhancement
Difficoltà 3/5 1-2 giorni Idoneità per principianti 35/100
pytest-dev/pytest-order#50 · 4 commenti ·
Tutte le issue di pytest-dev/pytest-order
Issue simili
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 88/100
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 84/100
spec-kitty/spec-kitty#5319 ·
I maintainer di solito rispondono entro 1 giorno
-
backend::vllm diffusion multimodal
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 84/100
openai/openai-agents-python#5229 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 84/100
I maintainer di solito rispondono entro 1 giorno