delta-io/delta

[Feature Request][Spark] Add test coverage for clustering on generated columns

Open

#3.248 aberto em 10 de jun. de 2024

Ver no GitHub
 (8 comments) (0 reactions) (1 assignee)Scala (2.100 forks)batch import
enhancementgood first issue

Métricas do repositório

Stars
 (8.807 stars)
Métricas de merge de PR
 (Mesclagem média 7d 1h) (142 fundiu PRs em 30d)

Description

Feature request

Which Delta project/connector is this regarding?

  • Spark
  • Standalone
  • Flink
  • Kernel
  • Other (fill in here)

Overview

Clustered tables support columns with stats collected on them, so generated column should work. We should add testing to cover this scenario.

Further details

We can add tests for generated columns in ClusteredTableDDLSuite.scala

Willingness to contribute

The Delta Lake Community encourages new feature contributions. Would you or another member of your organization be willing to contribute an implementation of this feature?

  • Yes. I can contribute this feature independently.
  • Yes. I would be willing to contribute this feature with guidance from the Delta Lake community.
  • No. I cannot contribute this feature at this time.

Guia do colaborador

Direção de pesquisa
Revise o ClusteredTableDDLSuite.scala existente e entenda como as colunas geradas são tratadas. Em seguida, adicione casos de teste que verifiquem se o clustering em colunas geradas funciona corretamente.
Pilha de tecnologia
scala
Domain
backenddatadatabase
Tipo Issue
Teste
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
3
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
1-2 dias
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Principalmente claro
Prerequisites
ScalaGit
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
40