lance-format/lance

Column Statistic improvment list after MVP

Open

#5 857 ouverte le 29 janv. 2026

Voir sur GitHub
 (0 commentaires) (0 réactions) (0 assignés)Rust (695 forks)github user discovery
A-encodingA-formatenhancementfeaturehelp wanted

Métriques du dépôt

Stars
 (6 582 stars)
Métriques de merge PR
 (Merge moyen 6j 1h) (219 PRs mergées en 30 j)

Description

As we are wrapping up on the dataset level column statistics MVP, there are some high priority todo items: [ ] Support column stats generation for partial dataset. Currently the dataset will only be generated when all the files in the dataset has column stats written. A naive implementation is just to build the stats from the old fragment file rather than terminate early. [ ] Expose a Python API from the rust implementation. [ ] Exposing more stats in the discussion thread #4540

More could be found in the design doc

Guide contributeur

Direction de recherche
Étudiez l'implémentation existante des statistiques de colonnes dans la base de code Rust, comprenez le gestionnaire de fragments et comment les statistiques sont générées, puis implémentez la prise en charge des ensembles de données partiels en construisant les statistiques à partir d'anciens fragments au lieu de s'arrêter prématurément. Exposez également une API Python et ajoutez plus de statistiques comme indiqué dans le fil de discussion.
Stack technique
rust
Domaine
database
Type d'issue
Fonctionnalité
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
3
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
Plus d'une semaine
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
Rust
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
30