Implement some form of deletion policy for Spark applications
Los mantenedores suelen responder en 1 día
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 5/5
- Tiempo estimado
- Más de una semana
- Aptitud para principiantes
- 25/100
- Tipo de issue
- Nueva funcionalidad
- Claridad
- Necesita aclaración
- Estado de actividad
- Estancado
- Stack tecnológico
- kubernetes, rust, spark
Línea de trabajo
No se nombra ningún archivo, prueba ni punto de entrada. Empieza por localizar el ciclo de vida de SparkApplication y los recursos creados por spark-submit, incluido el driver Pod; define el comportamiento de la deletion-policy y verifica que los dependientes obsoletos se gestionen para Never, Always y AlwaysOnSuccess.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
Description
SparkApplications own all resources created by spark-submit, including the driver Pod. Since applications are created by the user, the dependents remain present in the cluster long after the application is finished.
To clean up these (stale) resources, we propose implementing some form of deletion policy for the SparkApplication it's self. Possible policies could be:
NeverAlwaysAlwaysOnSuccess
- Lenguaje dominante
- Rust
- Estrellas
- 73
- Forks
- 5
- Merge medio
- 7 h 3 min
- PR fusionados (30 d)
- 10
Preparar el entorno
- Sin Dockerfile ni archivo de Docker Compose
- Tiene una plantilla de pull request
- Sin guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de stackabletech/spark-k8s-operator
-
type/bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100
stackabletech/spark-k8s-operator#775 ·
Los mantenedores suelen responder en 1 día
-
Pin versions/ranges for spark-connect-client python dependencies using a constraints filePosiblemente ocupada @Maleware la tomó hace 6 días. Abiertotype/bug
stackabletech/spark-k8s-operator#786 · 1 comentario · 1 asignado ·
Los mantenedores suelen responder en 1 día
-
Application driver Pod is not terminated when Spark is OOMKilledPosiblemente ocupada @razvan la tomó hace 17 días. Abiertotype/bug
stackabletech/spark-k8s-operator#780 · 1 asignado ·
Los mantenedores suelen responder en 1 día
-
Dificultad 4/5 3-5 días Aptitud para principiantes 55/100
stackabletech/spark-k8s-operator#774 · 1 comentario ·
Los mantenedores suelen responder en 1 día
-
type/bug
Dificultad 4/5 3-5 días Aptitud para principiantes 45/100
stackabletech/spark-k8s-operator#770 ·
Los mantenedores suelen responder en 1 día
Todos los issues de stackabletech/spark-k8s-operator
Issues similares
-
ci: SHA pin 3rd party actionsAbierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 64/100
Los mantenedores suelen responder en 3 días
-
Zellij doesn't validate hex colors correctly and crashesPosiblemente ocupada @ymcx la tomó hoy. Abiertosuspected bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 76/100
zellij-org/zellij#5732 ·
Los mantenedores suelen responder en 1 día
-
bug rust
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
jonathanong/no-mistakes#2267 ·
Los mantenedores suelen responder en 1 día
-
BASEPRI needs an ISBAbierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 69/100
rust-embedded/cortex-m#702 · 1 comentario ·
-
Make major, minor, and makedev safe on solarish targetsPosiblemente ocupada @xtqqczze la tomó hoy. Abierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
Los mantenedores suelen responder en 1 día