kubeflow/sdk

SparkConnect CR cleanup behavior on failure and SDK state mismatch

Aberta

#476 aberto em 30 de abr. de 2026

Ver no GitHubGuia do colaborador
 (6 comentários) (1 reação) (1 responsável)Python (196 forks)auto 404
area/sparkgood first issuehelp wantedkind/bug

Métricas do repositório

Stars
 (124 estrelas)
Métricas de merge de PR
 (Mesclagem média 12d 14h) (31 fundiu PRs em 30d)

Description

Summary

While working on port-forward cleanup in the SDK #460 , it surfaced that there may be a broader gap in how SparkConnect resources are handled on failure.

Observations

  • SparkConnect CR does not appear to clean up resources when connection/setup fails
  • This can leave resources running if failure happens mid-connection

There is a related issue in the Spark Operator: kubeflow/spark-operator#2927

Additional Observation

There also appears to be a mismatch in state mapping:

  • The SDK exposes a "Running" state
  • SparkConnect CR does not expose a corresponding state

Guia do colaborador

Direção de pesquisa
Investigue o ciclo de vida do SparkConnect CR e o código de mapeamento de estado do SDK para identificar onde a limpeza está faltando em caso de falha e onde o mapeamento de estado difere.
Pilha de tecnologia
pythonkubernetes
Domain
backenddevops
Tipo Issue
Bug
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
3
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
Meio dia
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Principalmente claro
Prerequisites
GitPython
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
60