pola-rs/polars

Support HDF5 reading/writing (with optional dependencies)

Open

#3 520 ouverte le 28 mai 2022

Voir sur GitHub
 (48 commentaires) (45 réactions) (0 assignés)Rust (2 826 forks)batch import
A-ioacceptedenhancementhelp wantedpython

Métriques du dépôt

Stars
 (38 496 stars)
Métriques de merge PR
 (Merge moyen 3j 18h) (175 PRs mergées en 30 j)

Description

We can reduce friction by figuring out how to load data most efficiently to polars memory.

Guide contributeur

Direction de recherche
Cette issue propose d'ajouter la lecture/écriture HDF5 à Polars. Étant donné la longue discussion, un contributeur doit d'abord lire tous les commentaires pour comprendre les considérations de conception précédentes. Les fichiers clés à examiner se trouvent probablement dans la crate `polars io`, comme `src/serde.rs` ou similaire. Il faut envisager d'utiliser une bibliothèque Rust HDF5 existante comme `hdf5` ou `hdf5 rs`. L'implémentation doit s'intégrer aux API lazy et eager de Polars. Aucune PR n'est liée, donc ce sujet est ouvert à une nouvelle exploration.
Stack technique
rustpython
Domaine
backenddata
Type d'issue
Fonctionnalité
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
4
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
Plus d'une semaine
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Investigation requise
Prérequis
RustHDF5
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
25