kubeflow/trainer

Support local iceberg table with parquet files to local validation and e2es

Open

#3174 aperta il 4 feb 2026

Vedi su GitHub
 (18 commenti) (0 reazioni) (1 assegnatario)Go (964 fork)github user discovery
area/data-cachegood first issuehelp wanted

Metriche repository

Star
 (2112 star)
Metriche merge PR
 (Metriche PR in attesa)

Descrizione

Currently data cache is integrates static iceberg table on s3. This issue tracks support for local iceberg table for local validation of cache and also add support to e2e

Guida contributor

Direzione di ricerca
Esamina l'implementazione esistente della cache dati che utilizza tabelle Iceberg su S3, quindi progetta un'alternativa locale con file Parquet per la validazione e i test end to end.
Tech stack
go
Dominio
backenddata
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
1-2 giorni
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Abbastanza chiara
Prerequisiti
GoApache IcebergParquet
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
40