feast-dev/feast

Loading 600K features from a parquet file

Aperta

#4589 aperta il 30 set 2024

Vedi su GitHubGuida contributor
 (5 commenti) (0 reazioni) (1 assegnatario)Python (896 fork)batch import
good first issuekind/bugpriority/p2wontfix

Metriche repository

Star
 (5029 stelle)
Metriche merge PR
 (Merge medio 9g 1h) (59 PR mergiate in 30 g)

Descrizione

Context

Given the sample files from the OpenShift AI tutorial - Fraud detection example, repo link, including 600,000 rows modelling a fraud detection dataset.

Objective

I want to model the same training dataset as a Feast offline store using a FileSource and then fetch all the historical features at once.

See all the details to replicate the issue here: https://github.com/dmartinol/feast_issue_600K

Guida contributor

Direzione di ricerca
Investiga il percorso di caricamento dei dati per i file parquet in Feast, concentrandoti su come vengono analizzate e memorizzate le 600K feature. Controlla eventuali colli di bottiglia nella memoria o nelle prestazioni.
Tech stack
python
Dominio
backenddatamachine learning
Tipo issue
Bug
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Mezza giornata
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Abbastanza chiara
Prerequisiti
PythonGit
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
60