apache/airflow

Databricks: add SQL endpoint operators

Ouverte

#21 377 ouverte le 7 févr. 2022

Voir sur GitHubGuide contributeur
 (11 commentaires) (0 réaction) (0 personne assignée)Python (16 781 forks)batch import
area:providersgood first issuekind:featureprovider:databricks

Métriques du dépôt

Stars
 (44 809 étoiles)
Métriques de merge PR
 (Métriques PR en attente)

Description

Description

Operators to manipulate Databricks SQL endpoints.

Use case/motivation

Support conveniently managing the lifecycle of Databricks SQL endpoints. This likely entails building one or more operators which talk to the endpoints API and support:

  • Creating endpoints
  • Deleting endpoints
  • Starting endpoints
  • Stopping endpoints

These operations map cleanly to individual API calls.

Related issues

No response

Are you willing to submit a PR?

  • Yes I am willing to submit a PR!

Code of Conduct

Guide contributeur

Direction de recherche
Étudiez la documentation de l'API des points de terminaison SQL Databricks et examinez les opérateurs Airflow existants pour Databricks (par exemple, DatabricksCreateClusterOperator) comme modèle pour implémenter les opérateurs de création, suppression, démarrage et arrêt.
Stack technique
python
Domaine
backenddata
Type d'issue
Fonctionnalité
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
3
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
Une demi journée
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
PythonApache AirflowDatabricks
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
65