baobabsoluciones/cornflow

Set airflow zombie job as failed in cornflow

Aberta

#600 aberto em 20 de jan. de 2025

Ver no GitHubGuia do colaborador
 (0 comentário) (0 reação) (0 responsável)Python (5 forks)auto 404
good first issueserverurgent

Métricas do repositório

Stars
 (21 estrelas)
Métricas de merge de PR
 (Mesclagem média 46d 15h) (5 fundiu PRs em 30d)

Description

Is your feature request related to a problem? Please describe. Some zombie job which are in undetermined state can occur in airflow when a job is interrupted suddenly (when redeploying the app for example). These zombie job can create problems since their state in execution table is running.

Describe the solution you'd like Detect zombie job and set them as failed in cornflow. Zombie jobs should be running in cornflow but would not appear or would appear with unknown state in airflow.

Guia do colaborador

Direção de pesquisa
Examine os mecanismos de detecção de jobs zumbis do Airflow e como o cornflow rastreia os estados dos jobs. Identifique onde adicionar lógica para marcar jobs zumbis como falhos no banco de dados do cornflow.
Pilha de tecnologia
python
Domain
backend
Tipo Issue
Funcionalidade
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
2
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
1-3 horas
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Recente
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Claro
Prerequisites
PythonGit
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
65