project-chip/connectedhomeip

Improve Dashboard for Flaky tests

Open

#71.613 aberto em 16 de abr. de 2026

Ver no GitHub
 (2 comments) (0 reactions) (0 assignees)C++ (1.659 forks)batch import
good first issue

Métricas do repositório

Stars
 (6.410 stars)
Métricas de merge de PR
 (Mesclagem média 8d 5h) (375 fundiu PRs em 30d)

Description

Summary

  • Recently, a new Dashboard got integrated. This dashboard monitors (REPL Test Runs) whenever there is a "push to master branch" or whenever there is any Master run of REPL Tests.

  • The limitation with this dashboard, is that it's hard to see proper statistics on flaky tests, the focus is mostly on current run

  • Can we get a clearer way to displaying history of failed tests, so that we can track flaky tests more easily?

  • link for dashboard: https://project-chip.github.io/connectedhomeip/allure-report/ci_tests/

Guia do colaborador

Direção de pesquisa
Examine o código fonte do painel para entender como os resultados dos testes são armazenados e exibidos, depois proponha uma maneira de mostrar dados históricos de falhas.
Pilha de tecnologia
None
Domain
testingobservability
Tipo Issue
Funcionalidade
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
2
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
1-3 horas
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Claro
Prerequisites
None
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
70