Add support for selective test run with a test plan
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 38/100
Direzione di ricerca
Inizia individuando il percorso di esecuzione dei test dell’adattatore Codeception e il modo in cui gestisce gli ID Allure e i valori fullName. Poi traccia come ALLURE_TESTPLAN_PATH potrebbe essere letto e validato; il lavoro è completato quando un piano valido esegue solo i test corrispondenti a un id o a un selettore, mentre i test senza corrispondenza vengono ignorati.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
There is a general mechanism used by Allure adapters to run tests selectively. It uses a test plan - a .json file with the following schema:
{
"type": "object",
"properties": {
"tests": {
"type": "array",
"items": {
"type": "object",
"properties": {
"id": { "type": "string" },
"selector": { "type": "string" }
}
}
}
}
}
A path to a test plan is provided as a value of the ALLURE_TESTPLAN_PATH environment variable.
If a valid test plan file is provided, only matched tests should be run. A test is matched if there is at least one entry in the tests array, such that:
- If the
idproperty is present in the entry AND the test has an Allure ID (added via theallure_idoras_idlabel), theidproperty must be the same as the Allure ID of the test, OR - If the
selectorproperty is present in the entry, it must be the same as the test'sfullName.
Motivation
Test plan support allows selective runs from TMS (e.g., TestOps). Ideally, the mechanism should be supported by all Allure adapters.
- Lingua principale
- PHP
- Stelle
- 53
- Fork
- 43
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Preparare l'ambiente
- Nessun Dockerfile né file Docker Compose
- Nessun modello di pull request
- Leggi la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Issue simili
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 60/100
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
ProfessionalWiki/NeoWiki#1675 ·
I maintainer di solito rispondono entro 1 giorno
-
Incorrect documentationAperta
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 88/100
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 70/100
-
WhatsApp link preview crawler is not detected as a botForse già presa Una pull request collegata a questa issue è aperta o già unita. Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
matomo-org/device-detector#8405 ·
I maintainer di solito rispondono entro 1 giorno