apache/airflow

Databricks: add SQL endpoint operators

Open

#21.377 aberto em 7 de fev. de 2022

Ver no GitHub
 (11 comments) (0 reactions) (0 assignees)Python (16.781 forks)batch import
area:providersgood first issuekind:featureprovider:databricks

Métricas do repositório

Stars
 (44.809 stars)
Métricas de merge de PR
 (Mesclagem média 7d 18h) (834 fundiu PRs em 30d)

Description

Description

Operators to manipulate Databricks SQL endpoints.

Use case/motivation

Support conveniently managing the lifecycle of Databricks SQL endpoints. This likely entails building one or more operators which talk to the endpoints API and support:

  • Creating endpoints
  • Deleting endpoints
  • Starting endpoints
  • Stopping endpoints

These operations map cleanly to individual API calls.

Related issues

No response

Are you willing to submit a PR?

  • Yes I am willing to submit a PR!

Code of Conduct

Guia do colaborador

Direção de pesquisa
Estude a documentação da API de endpoints SQL do Databricks e veja os operadores existentes do Airflow para Databricks (por exemplo, DatabricksCreateClusterOperator) como modelo para implementar operadores de criação, exclusão, início e parada.
Pilha de tecnologia
python
Domain
backenddata
Tipo Issue
Funcionalidade
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
3
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
Meio dia
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Claro
Prerequisites
PythonApache AirflowDatabricks
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
65