apache/airflow

Improve Databricks operators with query tags

Fechada

#66.839 aberto em 13 de mai. de 2026

Ver no GitHubGuia do colaborador
 (5 comentários) (0 reação) (0 responsável)Python (16.781 forks)batch import
good first issuekind:featureprovider:databricks

Métricas do repositório

Stars
 (44.809 estrelas)
Métricas de merge de PR
 (Mesclagem média 7d 18h) (834 fundiu PRs em 30d)

Description

Description

Databricks supports query tags which allows us to track where the source of a query is on Databricks UI. Reference: https://docs.databricks.com/aws/en/sql/user/queries/query-tags

Currently when a query is sent to Databricks, on Databricks UI, the only info we can see is the query is from Airflow, but there is no other metadata like airflow dag id, task id, run id and etc.

Use case/motivation

With query tags instrumented, it will be easy for organizations to track and do Databricks cost contribution across different Airflow DAGs.

Related issues

No response

Are you willing to submit a PR?

  • Yes I am willing to submit a PR!

Code of Conduct

Guia do colaborador

Direção de pesquisa
Examine the existing Databricks operators in the Airflow providers package (e.g., airflow/providers/databricks/operators/). Understand the query tag documentation from Databricks to see how tags are passed. Consider adding a parameter to the operators for query tags and ensure they are attached to each query execution. Check for any existing PRs or discussions on the issue for implementation details.
Pilha de tecnologia
python
Domain
backenddata
Tipo Issue
Funcionalidade
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
3
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
1-2 dias
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Claro
Prerequisites
Basic understanding of Apache Airflow operatorsFamiliarity with Databricks SQLPython programming
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
50