pola-rs/polars

Support HDF5 reading/writing (with optional dependencies)

Open

#3520 aperta il 28 mag 2022

Vedi su GitHub
 (48 commenti) (45 reazioni) (0 assegnatari)Rust (2826 fork)batch import
A-ioacceptedenhancementhelp wantedpython

Metriche repository

Star
 (38.496 star)
Metriche merge PR
 (Merge medio 3g 18h) (175 PR mergiate in 30 g)

Descrizione

We can reduce friction by figuring out how to load data most efficiently to polars memory.

Guida contributor

Direzione di ricerca
Questa issue propone l'aggiunta della lettura/scrittura HDF5 a Polars. Data la lunga discussione, un contributore dovrebbe prima leggere tutti i commenti per comprendere le precedenti considerazioni di progettazione. I file chiave da esaminare sono probabilmente nella crate `polars io`, come `src/serde.rs` o simili. Si dovrebbe considerare l'utilizzo di una libreria Rust HDF5 esistente come `hdf5` o `hdf5 rs`. L'implementazione deve integrarsi con le API lazy e eager di Polars. Non esiste alcun PR collegato, quindi questo è aperto a una nuova esplorazione.
Tech stack
rustpython
Dominio
backenddata
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
4
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Oltre 1 settimana
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Richiede indagine
Prerequisiti
RustHDF5
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
25