perf(basket): parallelize batch ingest and memoize Geo/UA lookups
@sundaram2021 ci sta già lavorando.
Dal 21/9/2026.
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 55/100
- Tipo di issue
- Refactoring
- Chiarezza
- Abbastanza chiara
- Stato di attività
- Attiva
- Stack tecnologico
- typescript
- Ambito
- analytics, backend, performance
Direzione di ricerca
Start in apps/basket/src/routes/basket.ts, reading the batch handler at lines 572-611 and getBatchVisitorCountry around line 561. Trace checkForBot, validateEventSchema, processTrackEventData, getGeo, and parseUserAgent before changing the batch flow. Done means batch work is parallelized and lookups are reused while preserving result ordering and bot-ignore semantics.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Summary
Basket batch ingest processes events serially and repeats GeoIP + UA parsing per event, limiting throughput on large batches.
What's the issue
In apps/basket/src/routes/basket.ts:572-611, the batch handler loops with await checkForBot, await validateEventSchema, await processTrackEventData per event. processTrackEventData does Promise.all([getGeo(ip), parseUserAgent()]) per item, so a 50-event batch pays 50x GeoIP + UA + bot scans serially. Only the outgoing_link path memoizes via getBatchVisitorCountry:561.
Proposed fix
- Validate schemas in chunked parallel batches (e.g. Promise.allSettled, size 10).
- Memoize getGeo + parseUserAgent by distinct (ip, ua) key per batch request.
- Keep per-event result ordering and bot-ignore semantics.
- Lingua principale
- TypeScript
- Stelle
- 1.2k
- Fork
- 227
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Preparare l'ambiente
- Include un Dockerfile o un file Docker Compose
- Ha un modello di pull request
- Leggi la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Issue simili
-
b:minor bug
Difficoltà 2/5 1-3 ore Idoneità per principianti 76/100
software-mansion/argent#1698 ·
I maintainer di solito rispondono entro 1 giorno
-
e2e-failure ready-to-code
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
redhat-developer/rhdh-plugin-export-overlays#4624 · 1 commento ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 82/100
better-auth/better-auth#12132 · 1 reazione ·
I maintainer di solito rispondono entro 1 giorno
-
automation missing-model model-sync provider:tinfoil
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
anomalyco/models.dev#12053 ·
I maintainer di solito rispondono entro 1 giorno
-
o8 next debug build aborts on Glass to Dark appearance switch (nil identifier messaged before check)Apertabug
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
hurttlocker/o8#5112 ·