Add optional catalog field to runs and dlchange topic schemas
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 56/100
Direzione di ricerca
Start with conf/topic_schemas/runs.json and conf/topic_schemas/dlchange.json, then trace where catalog_id is persisted in the Postgres writer and database schema. Check api.yaml, related tests, documentation, and example payloads for the same field. Done when both schemas accept an optional free-form string, persistence and API handling are updated, and events without catalog remain valid.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Feature Description
Add an optional catalog string field to the event bus schemas (ADR 009, V4):
conf/topic_schemas/runs.json: inside eachjobs[]item, next tocatalog_idconf/topic_schemas/dlchange.json: top level, next tocatalog_id
Description: "Specifies the catalog name: glue, hive, starburst, etc. Since same catalog_id can exist in multiple catalogs". Free-form string; the listed values are examples, not an enum.
Problem / Opportunity
The same catalog_id can exist in multiple catalogs (glue, hive, starburst, ...), so catalog_id alone is ambiguous for consumers, dashboards and event-based triggering.
Acceptance Criteria
runs.jsonjob items anddlchange.jsonaccept an optionalcatalogstring.- Values are not restricted to glue/hive/starburst.
- Events without
catalogstay valid (backward compatible); the field is not added torequired. - Postgres writer, DB migration,
api.yaml, tests and docs handle the new field (persisted wherevercatalog_idis persisted). - Example payloads are updated.
Proposed Solution
Add the property to both schemas, extend the writer and add a migration (nullable column), update api.yaml and tests.
Dependencies / Related
ADR 009 - Event Bus - Run and EDLA topics (V4 proposal).
- Lingua principale
- Python
- Stelle
- 4
- Fork
- 0
- Merge medio
- 22h 3m
- PR unite (30g)
- 8
Preparare l'ambiente
- Include un Dockerfile o un file Docker Compose
- Ha un modello di pull request
- Nessuna guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di AbsaOSS/EventGate
-
refactoring type:tech-debt
Difficoltà 2/5 1-3 ore Idoneità per principianti 84/100
-
enhancement
Difficoltà 2/5 1-3 ore Idoneità per principianti 70/100
-
bug
Difficoltà 3/5 1-2 giorni Idoneità per principianti 64/100
-
Make Writes IdempotentApertaenhancement
Difficoltà 5/5 Più di una settimana Idoneità per principianti 32/100
-
infrastructure type:tech-debt
Difficoltà 3/5 1-2 giorni Idoneità per principianti 70/100
Tutte le issue di AbsaOSS/EventGate
Issue simili
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
UKGovernmentBEIS/optstop#10 ·
-
maintenance
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
pollen-robotics/reachy_mini#1508 ·
I maintainer di solito rispondono entro 1 giorno
-
[BUG] `cloud-keys.env` values retain enclosing quotes causing 401 Unauthorized, and missing utf-8 encoding crashes on WindowsForse già presa @divyanshu07-code l’ha presa oggi. Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 77/100
open-jarvis/OpenJarvis#1192 · 1 commento ·
I maintainer di solito rispondono entro 2 giorni
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
sylvainmetayer/homelab#851 ·
I maintainer di solito rispondono entro 1 giorno