apache/gravitino

[Improvement] Make Gravitino filesystem support both Hadoop 2 and Hadoop3

Open

#2827 aperta il 7 apr 2024

Vedi su GitHub
 (0 commenti) (0 reazioni) (0 assegnatari)Java (887 fork)auto 404
help wantedimprovement

Metriche repository

Star
 (3058 star)
Metriche merge PR
 (Metriche PR in attesa)

Descrizione

What would you like to be improved?

Current Gravitino virtual filesystem (filesystem-hadoop3) module only builds against Hadoop 3, doesn't have a shim layer to support multiple Hadoop versions. it is better to filesystem-hadoop3 module to support multiple Hadoop versions.

How should we improve?

I think we can refer to several projects to build a shim layer to support multiple Hadoop versions if necessary.

Guida contributor

Direzione di ricerca
Esamina le implementazioni esistenti di shim per le versioni di Hadoop in progetti simili e pianifica come integrare un livello shim nel modulo filesystem hadoop3 di Gravitino.
Tech stack
java
Dominio
backend
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
4
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
3-5 giorni
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Abbastanza chiara
Prerequisiti
JavaMavenGit
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
40