Provide failure, flaky test, and regression-focused summaries
I maintainer di solito rispondono entro 2 giorni
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 5/5
- Tempo stimato
- Più di una settimana
- Idoneità per principianti
- 25/100
Direzione di ricerca
Inizia dalle domande aperte dell'issue sui riepiloghi predefiniti, sulle distinzioni tra failure, error e flaky, sui fallimenti ripetuti tra ambienti diversi e su A/B Comparison. Esamina il modo in cui il dashboard e i meccanismi di reporting/notifica presentano attualmente i risultati dei test; il lavoro è completato quando esiste un design del riepilogo concordato che identifica failure, test flaky e regressioni senza richiedere l'ispezione individuale dei risultati riusciti.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Context
Maintainers running large test suites generally do not need to inspect successful results individually. User feedback highlighted workflows where thousands of tests run regularly, while the information requiring attention is primarily failures, flaky tests, errors, and newly introduced regressions.
Displaying large amounts of successful results makes it harder to identify actionable information.
Goal
Provide concise summaries focused on results that require developer attention. A maintainer should be able to quickly understand what failed, what appears flaky, and what changed compared with previous runs without navigating through large sets of successful results.
Points to discuss
• What should appear in the default summary.
• Distinction between failure, error, and flaky results.
• How flaky behavior should be detected and represented.
• Grouping repeated failures across environments.
• Integration with A/B Comparison.
• Whether summaries should be reusable by both the dashboard and reporting/notification mechanisms.
- Lingua principale
- Python
- Stelle
- 10
- Fork
- 32
- Merge medio
- 5g 22h
- PR unite (30g)
- 19
Preparare l'ambiente
- Include un Dockerfile o un file Docker Compose
- Nessun modello di pull request
- Leggi la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di kernelci/dashboard
-
4xx and 5xx by endpointForse già presa @alanpeixinho l’ha presa 5 giorni fa. Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
I maintainer di solito rispondono entro 2 giorni
-
[Local dev environment] PRIVACY.md missing in dashboard containerForse già presa @alanpeixinho l’ha presa 1 giorno fa. Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 84/100
kernelci/dashboard#2142 · 1 assegnatario ·
I maintainer di solito rispondono entro 2 giorni
-
[AB Comparison] Add labels to Previous commit and Branch head buttonsForse già presa @alanpeixinho l’ha presa 1 giorno fa. Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
kernelci/dashboard#2128 · 1 assegnatario ·
I maintainer di solito rispondono entro 2 giorni
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 52/100
I maintainer di solito rispondono entro 2 giorni
-
Difficoltà 3/5 1-2 giorni Idoneità per principianti 72/100
I maintainer di solito rispondono entro 2 giorni
Tutte le issue di kernelci/dashboard
Issue simili
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 82/100
RedHatQE/mtv-api-tests#721 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 84/100
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 1/5 1-3 ore Idoneità per principianti 85/100
pytest-dev/pluggy#757 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 1/5 1-3 ore Idoneità per principianti 85/100
NousResearch/hermes-agent#134960 ·
I maintainer di solito rispondono entro 1 giorno
-
HTML backend: `<br>` leaks the internal sentinel U+E000 into list items, headings and captionsForse già presa @morten-lagabote l’ha presa oggi. Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 67/100
docling-project/docling#4671 ·
I maintainer di solito rispondono entro 1 giorno