apache/airflow

Databricks: add SQL endpoint operators

Open

#21 377 ouverte le 7 févr. 2022

Voir sur GitHub
 (11 commentaires) (0 réactions) (0 assignés)Python (16 781 forks)batch import
area:providersgood first issuekind:featureprovider:databricks

Métriques du dépôt

Stars
 (44 809 stars)
Métriques de merge PR
 (Merge moyen 7j 18h) (834 PRs mergées en 30 j)

Description

Description

Operators to manipulate Databricks SQL endpoints.

Use case/motivation

Support conveniently managing the lifecycle of Databricks SQL endpoints. This likely entails building one or more operators which talk to the endpoints API and support:

  • Creating endpoints
  • Deleting endpoints
  • Starting endpoints
  • Stopping endpoints

These operations map cleanly to individual API calls.

Related issues

No response

Are you willing to submit a PR?

  • Yes I am willing to submit a PR!

Code of Conduct

Guide contributeur

Direction de recherche
Étudiez la documentation de l'API des points de terminaison SQL Databricks et examinez les opérateurs Airflow existants pour Databricks (par exemple, DatabricksCreateClusterOperator) comme modèle pour implémenter les opérateurs de création, suppression, démarrage et arrêt.
Stack technique
python
Domaine
backenddata
Type d'issue
Fonctionnalité
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
3
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
Une demi journée
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
PythonApache AirflowDatabricks
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
65