delta-io/delta

[Feature Request] Refactor SQL configuration properties to remove `databricks` prefix

Open

#1.384 aberto em 19 de set. de 2022

Ver no GitHub
 (5 comments) (2 reactions) (1 assignee)Scala (2.100 forks)batch import
enhancementgood first issue

Métricas do repositório

Stars
 (8.807 stars)
Métricas de merge de PR
 (Mesclagem média 7d 1h) (142 fundiu PRs em 30d)

Description

Feature request

Overview

Currently, Delta SQL configuration properties (link) are prefixed with spark.databricks.delta.

We should refactor this to be only spark.delta, while still maintaining support for legacy spark.databricks.delta usages.

Motivation

Delta Lake is an open-source project and we should clean up + refactor code (especially public-facing APIs like a SQL conf) to remove any references to databricks.

Guia do colaborador

Direção de pesquisa
Identifique todas as chaves de configuração com prefixo `spark.databricks.delta` em `DeltaSQLConf.scala` e em outros lugares, depois crie um mapeamento para as novas chaves `spark.delta` implementando um fallback para as chaves legadas. Atualize todas as referências e garanta que os testes existentes passem.
Pilha de tecnologia
scalaspark
Domain
datadatabase
Tipo Issue
Refatoração
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
3
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
1-2 dias
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Principalmente claro
Prerequisites
ScalaGitApache Spark
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
50