pola-rs/polars

Support HDF5 reading/writing (with optional dependencies)

Open

#3.520 aberto em 28 de mai. de 2022

Ver no GitHub
 (48 comments) (45 reactions) (0 assignees)Rust (2.826 forks)batch import
A-ioacceptedenhancementhelp wantedpython

Métricas do repositório

Stars
 (38.496 stars)
Métricas de merge de PR
 (Mesclagem média 3d 18h) (175 fundiu PRs em 30d)

Description

We can reduce friction by figuring out how to load data most efficiently to polars memory.

Guia do colaborador

Direção de pesquisa
Esta issue propõe adicionar leitura/escrita de HDF5 ao Polars. Dada a longa discussão, um contribuidor deve primeiro ler todos os comentários para entender as considerações de design anteriores. Os arquivos chave a serem examinados provavelmente estão na crate `polars io`, como `src/serde.rs` ou similares. Deve se considerar aproveitar uma biblioteca Rust HDF5 existente, como `hdf5` ou `hdf5 rs`. A implementação deve se integrar com as APIs lazy e eager do Polars. Não há PR vinculado, portanto, isso está aberto para uma nova exploração.
Pilha de tecnologia
rustpython
Domain
backenddata
Tipo Issue
Funcionalidade
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
4
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
Mais de 1 semana
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Precisa de investigação
Prerequisites
RustHDF5
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
25