apache/airflow

Databricks: add SQL endpoint operators

Aberta

#21.377 aberto em 7 de fev. de 2022

Ver no GitHubGuia do colaborador
 (11 comentários) (0 reação) (0 responsável)Python (16.781 forks)batch import
area:providersgood first issuekind:featureprovider:databricks

Métricas do repositório

Stars
 (44.809 estrelas)
Métricas de merge de PR
 (Métricas PR pendentes)

Description

Description

Operators to manipulate Databricks SQL endpoints.

Use case/motivation

Support conveniently managing the lifecycle of Databricks SQL endpoints. This likely entails building one or more operators which talk to the endpoints API and support:

  • Creating endpoints
  • Deleting endpoints
  • Starting endpoints
  • Stopping endpoints

These operations map cleanly to individual API calls.

Related issues

No response

Are you willing to submit a PR?

  • Yes I am willing to submit a PR!

Code of Conduct

Guia do colaborador

Direção de pesquisa
Estude a documentação da API de endpoints SQL do Databricks e veja os operadores existentes do Airflow para Databricks (por exemplo, DatabricksCreateClusterOperator) como modelo para implementar operadores de criação, exclusão, início e parada.
Pilha de tecnologia
python
Domain
backenddata
Tipo Issue
Funcionalidade
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
3
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
Meio dia
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Claro
Prerequisites
PythonApache AirflowDatabricks
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
65