Support syncing PySpark applications from Git
Los mantenedores suelen responder en 1 día
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 5/5
- Tiempo estimado
- Más de una semana
- Aptitud para principiantes
- 25/100
- Tipo de issue
- Nueva funcionalidad
- Claridad
- Necesita aclaración
- Estado de actividad
- Estancado
- Área
- data-engineering, devops
Línea de trabajo
Empieza leyendo el issue #504 relacionado de opa-operator y su implementación de gitsync; después, revisa cómo este operador coloca actualmente varios archivos Python en un ConfigMap. La tarea de operator-rs indica que puede ser necesario mover allí el código compartido; se considera terminada cuando las aplicaciones PySpark se puedan sincronizar desde Git sin requerir que todos los archivos estén en un ConfigMap.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
In case you have multiple Python files that form an application it is inconvenient to put everything in a ConfigMap.
It would be nice if you could use the same mechanism as implemented in Airflow using gitsync.
Related to https://github.com/stackabletech/opa-operator/issues/504, which implements the same thing for OPA regorules.
### Tasks
- [ ] Try to move commons code into operator-rs
- Lenguaje dominante
- Rust
- Estrellas
- 73
- Forks
- 5
- Merge medio
- 7 h 3 min
- PR fusionados (30 d)
- 10
Preparar el entorno
- Sin Dockerfile ni archivo de Docker Compose
- Tiene una plantilla de pull request
- Sin guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de stackabletech/spark-k8s-operator
-
type/bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100
stackabletech/spark-k8s-operator#775 ·
Los mantenedores suelen responder en 1 día
-
Pin versions/ranges for spark-connect-client python dependencies using a constraints filePosiblemente ocupada @Maleware la tomó hace 6 días. Abiertotype/bug
stackabletech/spark-k8s-operator#786 · 1 comentario · 1 asignado ·
Los mantenedores suelen responder en 1 día
-
Application driver Pod is not terminated when Spark is OOMKilledPosiblemente ocupada @razvan la tomó hace 17 días. Abiertotype/bug
stackabletech/spark-k8s-operator#780 · 1 asignado ·
Los mantenedores suelen responder en 1 día
-
Dificultad 4/5 3-5 días Aptitud para principiantes 55/100
stackabletech/spark-k8s-operator#774 · 1 comentario ·
Los mantenedores suelen responder en 1 día
-
type/bug
Dificultad 4/5 3-5 días Aptitud para principiantes 45/100
stackabletech/spark-k8s-operator#770 ·
Los mantenedores suelen responder en 1 día
Todos los issues de stackabletech/spark-k8s-operator
Issues similares
-
ci: SHA pin 3rd party actionsAbierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 64/100
Los mantenedores suelen responder en 3 días
-
Zellij doesn't validate hex colors correctly and crashesPosiblemente ocupada @ymcx la tomó hoy. Abiertosuspected bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 76/100
zellij-org/zellij#5732 ·
Los mantenedores suelen responder en 1 día
-
bug rust
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
jonathanong/no-mistakes#2267 ·
Los mantenedores suelen responder en 1 día
-
BASEPRI needs an ISBAbierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 69/100
rust-embedded/cortex-m#702 · 1 comentario ·
-
Make major, minor, and makedev safe on solarish targetsPosiblemente ocupada @xtqqczze la tomó hoy. Abierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
Los mantenedores suelen responder en 1 día