trinodb/trino

Restrict drop column operations for hive tables

Open

#20.807 aberto em 22 de fev. de 2024

Ver no GitHub
 (4 comments) (0 reactions) (0 assignees)Java (2.678 forks)batch import
good first issuehive

Métricas do repositório

Stars
 (9.113 stars)
Métricas de merge de PR
 (Mesclagem média 5d 9h) (306 fundiu PRs em 30d)

Description

As per the Hive docs - https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL#LanguageManualDDL-AlterTable/Partition/Column

REPLACE COLUMNS removes all existing columns and adds the new set of columns. This can be done only for tables with a native SerDe (DynamicSerDe, MetadataTypedColumnsetSerDe, LazySimpleSerDe and ColumnarSerDe). Refer to Hive SerDe for more information. REPLACE COLUMNS can also be used to drop columns. For example, "ALTER TABLE test_change REPLACE COLUMNS (a int, b int);" will remove column 'c' from test_change's schema.

But we try to run replace columns operation for all the file formats which provides inconsistent behavior both from Trino's hive connector and querying hive directly.

Guia do colaborador

Direção de pesquisa
Investigue a implementação de ALTER TABLE no conector Hive do Trino, especificamente o caminho de código para a operação REPLACE COLUMNS. Identifique onde a operação é atualmente permitida para todos os formatos de arquivo. Adicione uma verificação para restringir a operação a tabelas que usam tipos SerDe nativos (DynamicSerDe, MetadataTypedColumnsetSerDe, LazySimpleSerDe, ColumnarSerDe). Consulte a documentação do Hive vinculada na issue e considere testar com vários formatos de arquivo. Consulte quaisquer comentários na issue para obter contexto adicional ou orientação dos mantenedores.
Pilha de tecnologia
java
Domain
backenddatabase
Tipo Issue
Bug
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
2
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
1-3 horas
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Claro
Prerequisites
JavaGit
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
70