Probes: record more facts, add a generic chat/completions probe and a weekly run
I maintainer di solito rispondono entro 1 giorno
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 38/100
- Tipo di issue
- Funzionalità
- Chiarezza
- Specificata chiaramente
- Stato di attività
- Attiva
- Stack tecnologico
- github-actions, nodejs, typescript
Direzione di ricerca
Start at src/server/providers/probes/types.ts to see the single-fact ProbeRecord shape, then read the existing per-provider probes and the pnpm run probe -- <provider> --write CLI entry point that they feed. The chat/completions probe should key off the response body and status so only explicit limits (an error naming the field, or a 400) are recorded, with derivation probe-verified plus a date. Finally wire the weekly job in .github/workflows and confirm done by checking that a changed record produces a pull request and an unchanged run produces none.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Problem
A probe record can state one fact: ProbeRecord.fact is the literal 'schemaEndpointId' (src/server/providers/probes/types.ts). Nothing runs probes on a schedule. Facts that one cheap live request can settle stay empty (gap report, 2026-11-21):
| Fact | Missing chat rows | Mostly |
|---|---|---|
replayReasoningContent |
~1,200 | llmgateway 687, vercel 275 |
contextWindow |
~640 | llmgateway 539 |
maxOutput |
~440 | together 185, dashscope-cn 127 |
mandatoryUnknown flag |
~430 | llmgateway 251 |
Ask
- Widen the record to
replayReasoningContent,maxOutput,contextWindowandreasoning.mandatory. - Write one generic probe for the
chat/completionswire, shared by every provider on it. - Store a value only when the response is explicit: an error that states the limit, or a 400 that names the field. A plain 200 states nothing.
- Add a weekly CI job that runs
pnpm run probe -- <provider> --writeand opens a pull request. A person merges it. - Cap spend per run and never print a key.
Acceptance
- A probed fact is served with derivation
probe-verifiedand a date. - The weekly job opens a pull request when a record changes and none when nothing changed.
- Lingua principale
- TypeScript
- Stelle
- 0
- Fork
- 1
- Merge medio
- 5h 40m
- PR unite (30g)
- 193
Preparare l'ambiente
Questo progetto non fornisce container di sviluppo, Dockerfile né guida per i contributori, quindi l'ambiente è a tuo carico: parti dal suo README e consulta la nostra guida al primo contributo per i passaggi generali.
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di TanStack/schemas
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 66/100
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 30/100
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 3/5 1-2 giorni Idoneità per principianti 45/100
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 30/100
I maintainer di solito rispondono entro 1 giorno
Tutte le issue di TanStack/schemas
Issue simili
-
[Site] Active section detection should respect scroll-margin-topForse già presa Una pull request collegata a questa issue è aperta o già unita. Apertaarea/web reproduced type/bug
Difficoltà 2/5 1-3 ore Idoneità per principianti 65/100
anomalyco/opencode#65384 · 1 commento ·
I maintainer di solito rispondono entro 1 giorno
-
bug
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
swc-project/swc-ai-issues#1001 ·
-
Add: Da Vinci Asia VietnamApertacheck:passed streams:add
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 62/100
I maintainer di solito rispondono entro 1 giorno
-
fix(table): CollapseColumn uses wrong caret icon for expandable row toggleForse già presa @redhat-chai-bot l’ha presa oggi. Aperta
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 85/100
patternfly/patternfly-react#12727 ·
I maintainer di solito rispondono entro 1 giorno
-
CLI OAuth login fails behind an authenticating proxy: GET /api/v1/user omits Proxy-AuthorizationAperta
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 85/100
lightdash/lightdash#33086 · 1 commento ·
I maintainer di solito rispondono entro 1 giorno