Extend ArgoCD GitOps demo with DataOps
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 5/5
- Tempo stimato
- Più di una settimana
- Idoneità per principianti
- 25/100
- Tipo di issue
- Funzionalità
- Chiarezza
- Da chiarire
- Stato di attività
- Ferma
- Stack tecnologico
- kubernetes, terraform
- Ambito
- data-engineering, devops, infrastructure
Direzione di ricerca
Inizia leggendo la demo ArgoCD esistente e la demo “trino-taxi-data”, quindi individua come la demo gestisce il proprio cluster e i sealed secrets. Definisci l’ambito DataOps includendo l’integrazione della demo, l’aggiunta dell’Airflow DAG per i job Trino, il deployment degli artefatti dalla sorgente alla destinazione e la documentazione del workflow completato.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Stackable data platforms are defined declaratively, enabling automated, standardized, and efficient deployments.
This demo showcases an exemplary GitOps setup for the Stackable data platform using e.g. ArgoCD and distinct Dev/Prod stages. This approach offers consistency, version control, speed, enhanced collaboration, robust security, and observability, making it easier for teams to manage infrastructure as code and adopt Stackable.
For new, non-advanced users, this setup simplifies the learning curve, reduces manual errors, and provides a clear pathway to modern DevOps/GitOps practices.
Prerequisites
- no Dev/Prod stages (only 1 cluster)
- without terraform
- including secrets via git (sealed secrets)
Tasks - DataOps
- Integrate existing demo "trino-taxi-data" in ArgoCD demo
- Add a new airflow DAG to submit Trino jobs (create schema, create table,...)
- PLACEHOLDER: Show progress and refine next step
- Deploy new artifacts via dataops from source to target
- Documentation
- Lingua principale
- Jupyter Notebook
- Stelle
- 3
- Fork
- 13
- Merge medio
- 2g 20h
- PR unite (30g)
- 2
Guida per i contributori
Nessuna guida per i contributori indicizzata per questo repository
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di stackabletech/demos
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100
stackabletech/demos#402 ·
-
Difficoltà 3/5 1-2 giorni Idoneità per principianti 45/100
stackabletech/demos#349 ·
-
release-retro/25.3.0
Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100
stackabletech/demos#208 ·
-
Difficoltà 3/5 1-2 giorni Idoneità per principianti 45/100
stackabletech/demos#204 ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100
stackabletech/demos#202 · 3 commenti ·
Tutte le issue di stackabletech/demos
Issue simili
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 86/100
-
removeToken
Difficoltà 2/5 1-3 ore Idoneità per principianti 70/100
cowprotocol/token-lists#1514 · 2 commenti ·
-
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 92/100
anomalyco/models.dev#7670 · 1 commento ·
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
cisagov/cyhy-reports#149 · 3 commenti ·
-
remove entry
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 74/100