trinodb/trino

Restrict drop column operations for hive tables

Ouverte

#20 807 ouverte le 22 févr. 2024

Voir sur GitHubGuide contributeur
 (4 commentaires) (0 réaction) (0 personne assignée)Java (2 678 forks)batch import
good first issuehive

Métriques du dépôt

Stars
 (9 113 étoiles)
Métriques de merge PR
 (Merge moyen 5j 9h) (306 PRs mergées en 30 j)

Description

As per the Hive docs - https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL#LanguageManualDDL-AlterTable/Partition/Column

REPLACE COLUMNS removes all existing columns and adds the new set of columns. This can be done only for tables with a native SerDe (DynamicSerDe, MetadataTypedColumnsetSerDe, LazySimpleSerDe and ColumnarSerDe). Refer to Hive SerDe for more information. REPLACE COLUMNS can also be used to drop columns. For example, "ALTER TABLE test_change REPLACE COLUMNS (a int, b int);" will remove column 'c' from test_change's schema.

But we try to run replace columns operation for all the file formats which provides inconsistent behavior both from Trino's hive connector and querying hive directly.

Guide contributeur

Direction de recherche
Étudiez l'implémentation de ALTER TABLE dans le connecteur Hive de Trino, en particulier le chemin de code pour l'opération REPLACE COLUMNS. Identifiez où l'opération est actuellement autorisée pour tous les formats de fichier. Ajoutez une vérification pour restreindre l'opération aux tables utilisant des types SerDe natifs (DynamicSerDe, MetadataTypedColumnsetSerDe, LazySimpleSerDe, ColumnarSerDe). Référez vous à la documentation Hive liée dans l'issue et envisagez des tests avec divers formats de fichier. Consultez tout commentaire dans l'issue pour obtenir un contexte supplémentaire ou des directives des mainteneurs.
Stack technique
java
Domaine
backenddatabase
Type d'issue
Bug
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
2
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
1-3 heures
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
JavaGit
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
70