trinodb/trino

Restrict drop column operations for hive tables

Aperta

#20.807 aperta il 22 feb 2024

Vedi su GitHubGuida contributor
 (4 commenti) (0 reazioni) (0 assegnatari)Java (2678 fork)batch import
good first issuehive

Metriche repository

Star
 (9113 stelle)
Metriche merge PR
 (Merge medio 5g 9h) (306 PR mergiate in 30 g)

Descrizione

As per the Hive docs - https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL#LanguageManualDDL-AlterTable/Partition/Column

REPLACE COLUMNS removes all existing columns and adds the new set of columns. This can be done only for tables with a native SerDe (DynamicSerDe, MetadataTypedColumnsetSerDe, LazySimpleSerDe and ColumnarSerDe). Refer to Hive SerDe for more information. REPLACE COLUMNS can also be used to drop columns. For example, "ALTER TABLE test_change REPLACE COLUMNS (a int, b int);" will remove column 'c' from test_change's schema.

But we try to run replace columns operation for all the file formats which provides inconsistent behavior both from Trino's hive connector and querying hive directly.

Guida contributor

Direzione di ricerca
Indaga l'implementazione di ALTER TABLE nel connettore Hive di Trino, specificamente il percorso del codice per l'operazione REPLACE COLUMNS. Identifica dove l'operazione è attualmente consentita per tutti i formati di file. Aggiungi un controllo per limitare l'operazione alle tabelle che utilizzano tipi SerDe nativi (DynamicSerDe, MetadataTypedColumnsetSerDe, LazySimpleSerDe, ColumnarSerDe). Fai riferimento alla documentazione Hive collegata nell'issue e considera di testare con vari formati di file. Consulta eventuali commenti nell'issue per ulteriore contesto o indicazioni dei manutentori.
Tech stack
java
Dominio
backenddatabase
Tipo issue
Bug
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
2
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
1-3 ore
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
JavaGit
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
70