apache/airflow

Databricks: add SQL endpoint operators

Open

#21.377 aperta il 7 feb 2022

Vedi su GitHub
 (11 commenti) (0 reazioni) (0 assegnatari)Python (16.781 fork)batch import
area:providersgood first issuekind:featureprovider:databricks

Metriche repository

Star
 (44.809 star)
Metriche merge PR
 (Merge medio 7g 18h) (834 PR mergiate in 30 g)

Descrizione

Description

Operators to manipulate Databricks SQL endpoints.

Use case/motivation

Support conveniently managing the lifecycle of Databricks SQL endpoints. This likely entails building one or more operators which talk to the endpoints API and support:

  • Creating endpoints
  • Deleting endpoints
  • Starting endpoints
  • Stopping endpoints

These operations map cleanly to individual API calls.

Related issues

No response

Are you willing to submit a PR?

  • Yes I am willing to submit a PR!

Code of Conduct

Guida contributor

Direzione di ricerca
Studia la documentazione dell'API degli endpoint SQL di Databricks e guarda gli operatori Airflow esistenti per Databricks (es. DatabricksCreateClusterOperator) come modello per implementare gli operatori di creazione, eliminazione, avvio e arresto.
Tech stack
python
Dominio
backenddata
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Mezza giornata
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
PythonApache AirflowDatabricks
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
65