lance-format/lance

Column Statistic improvment list after MVP

Open

#5857 aperta il 29 gen 2026

Vedi su GitHub
 (0 commenti) (0 reazioni) (0 assegnatari)Rust (695 fork)github user discovery
A-encodingA-formatenhancementfeaturehelp wanted

Metriche repository

Star
 (6582 star)
Metriche merge PR
 (Merge medio 6g 1h) (219 PR mergiate in 30 g)

Descrizione

As we are wrapping up on the dataset level column statistics MVP, there are some high priority todo items: [ ] Support column stats generation for partial dataset. Currently the dataset will only be generated when all the files in the dataset has column stats written. A naive implementation is just to build the stats from the old fragment file rather than terminate early. [ ] Expose a Python API from the rust implementation. [ ] Exposing more stats in the discussion thread #4540

More could be found in the design doc

Guida contributor

Direzione di ricerca
Studia l'implementazione esistente delle statistiche delle colonne nel codice Rust, comprendi il fragment manager e come vengono generate le statistiche, quindi implementa il supporto per dataset parziali costruendo le statistiche da vecchi frammenti invece di terminare anticipatamente. Esponi anche un'API Python e aggiungi più statistiche come da thread di discussione.
Tech stack
rust
Dominio
database
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Oltre 1 settimana
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
Rust
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
30