pull-request-dashboard: replay corpus cannot validate routes end to end
I maintainer di solito rispondono entro 1 giorno
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 48/100
- Tipo di issue
- Funzionalità
- Chiarezza
- Abbastanza chiara
- Stato di attività
- Tranquilla
- Ambito
- devtools, testing-qa
Direzione di ricerca
Inizia tracciando normalize_events, compute_facts e route_pr, quindi esamina gli harness esistenti e i valori delle route nei branch di otelbot/pull-request-dashboard-state/. Ricostruisci il corpus di 441 PR con commit, controlli di stato e stato mergeable, mantieni il collector nel repository e aggiungi un replay che confronti le route calcolate con le route registrate. Il lavoro è completato quando i cambiamenti nella classificazione a livello di route possono essere confrontati nell’intero corpus.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
The 441 pull request replay corpus used to validate dashboard classification changes was collected without commits, so it cannot be used to compare whole-PR routes before and after a change.
normalize_events reads raw["commits"], and the harnesses work around this by passing {"commits": [], "review_comments": []}. That is fine for deriving discussion items and review threads, but it means compute_facts never sees pushes or CI, so route_pr cannot be evaluated. Any classification change can therefore only be measured at the discussion layer.
Concretely, the review-thread rewrite could be measured as "134 of 144 pull requests unchanged in whether any thread demands the author", but not as "N of 441 routes unchanged", which is the number that actually matters.
To close this:
- re-collect the corpus with
commitsand whatever elsecompute_factsreads (status checks, mergeable state) - add a replay that computes
route_prper pull request and diffs against therouterecorded in theotelbot/pull-request-dashboard-state/<repo>branches - keep the collector in the repo rather than as local scratch, so the corpus can be rebuilt
Until then, route-level claims about classification changes are not supported by evidence.
- Lingua principale
- JavaScript
- Stelle
- 7
- Fork
- 23
- Merge medio
- 15h 46m
- PR unite (30g)
- 41
Preparare l'ambiente
- Nessun Dockerfile né file Docker Compose
- Nessun modello di pull request
- Leggi la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di open-telemetry/shared-workflows
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 25/100
open-telemetry/shared-workflows#532 · 1 commento ·
I maintainer di solito rispondono entro 1 giorno
-
Hash-lock pull request dashboard Python dependencies (move to uv)Forse già presa @irfadkp l’ha presa 3 giorni fa. Apertadashboard dependencies
Difficoltà 4/5 3-5 giorni Idoneità per principianti 51/100
open-telemetry/shared-workflows#517 · 2 commenti · 1 reazione ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 3/5 1-2 giorni Idoneità per principianti 52/100
open-telemetry/shared-workflows#492 · 2 commenti ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100
open-telemetry/shared-workflows#422 ·
I maintainer di solito rispondono entro 1 giorno
-
Support Zizmor SARIF uploads from private repositoriesForse di nuovo libera @trask l’ha presa 61 giorni fa e non c’è nessuna pull request aperta. Aperta
open-telemetry/shared-workflows#390 · 1 assegnatario ·
I maintainer di solito rispondono entro 1 giorno
Tutte le issue di open-telemetry/shared-workflows
Issue simili
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
I maintainer di solito rispondono entro 1 giorno
-
Falló el respaldo diarioAperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
manuXD270516/descanso#80 ·
I maintainer di solito rispondono entro 2 giorni
-
feat: Warn while typing a forbidden character in a file nameForse già presa @Mittalnew l’ha presa oggi. Apertaapp Drive 📁 enhancement OO Docs
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
linagora/twake-drive#4620 · 1 commento ·
I maintainer di solito rispondono entro 1 giorno
-
国战吕蒙【谋断】问题Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 64/100
I maintainer di solito rispondono entro 1 giorno
-
Edit: Hello TasteApertachannels:edit check:passed
Difficoltà 2/5 1-3 ore Idoneità per principianti 67/100
I maintainer di solito rispondono entro 1 giorno