feast-dev/feast

Latest Only option for Historical Retrieval

Open

#1687 aperta il 5 lug 2021

Vedi su GitHub
 (12 commenti) (1 reazione) (0 assegnatari)Python (896 fork)batch import
Community Contribution Neededgood first issuekeep-openkind/featurepriority/p1

Metriche repository

Star
 (5029 star)
Metriche merge PR
 (Merge medio 8g 20h) (55 PR mergiate in 30 g)

Descrizione

Is your feature request related to a problem? Please describe.

In many batch workflows, it is worthwhile to retrieve the latest features by entity only. This is useful from the purposes of both production and backtesting purposes.

E.g. if I have an hourly/daily batch which goes through our whole customer base to find fraudulent customers, we wouldn't really use the online store for this.

Describe the solution you'd like

Allow users to specify an entity set extracted from a feature view should have an option to be deduplicated by latest. Depends on #1611

my_daily_batch_scoring_df = store.get_latest_features(
    entity_df = "my_df", 
    feature_refs = [...],
)

Additional context Linked issue #1611

Guida contributor

Direzione di ricerca
La richiesta di funzionalità propone un nuovo metodo `get latest features` per deduplicare le feature storiche per entità. L'implementazione dipende dalla risoluzione preliminare dell'issue #1611. Dovrebbe essere studiato il metodo esistente `get historical features` nell'SDK Python (probabilmente in `sdk/python/feast/inference.py` o simile). I commenti sull'issue potrebbero contenere discussioni sul design dell'API. Concentrarsi sulla comprensione di come vengono attualmente recuperati gli insiemi di entità e le viste delle feature, e di come si adatterebbe la deduplicazione per timestamp più recente.
Tech stack
python
Dominio
datamachine learning
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
1-2 giorni
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Datata
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Abbastanza chiara
Prerequisiti
Familiarity with Feast feature storeUnderstanding of historical retrieval APIKnowledge of entity sets and deduplication
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
30