pyro-ppl/pyro

[FR] Online (streaming) VI support

Open

#2882 aperta il 21 giu 2021

Vedi su GitHub
 (3 commenti) (0 reazioni) (0 assegnatari)Python (981 fork)batch import
enhancementhelp wanted

Metriche repository

Star
 (8211 star)
Metriche merge PR
 (Merge medio 10g 19h) (1 PR mergiata in 30 g)

Descrizione

It would be nice to have native support for online VI (its main 3 flavors are listed here: https://arxiv.org/abs/1904.03920 ).

Currently, the only tool applicable to the online learning scenario would be the SMCFilter, but it often performs poorly in high-dimensional situations.

SMCFilter itself could also benefit from particle MCMC rejuvenation as discussed here: https://www.springer.com/gp/book/9783030478445 and implemented in the particles package: https://github.com/nchopin/particles

Guida contributor

Direzione di ricerca
Studiare il documento arXiv citato (1904.03920) per i metodi di inferenza variazionale online. Esaminare l'implementazione attuale di SMCFilter nel codice sorgente di Pyro. Rivedere il pacchetto particles (nchopin/particles) per il ringiovanimento di MCMC particellare. Coinvolgere i manutentori per definire l'API specifica e l'ambito della funzionalità.
Tech stack
pythonpytorch
Dominio
machine learning
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
5
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Oltre 1 settimana
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Datata
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Richiede indagine
Prerequisiti
variational inferencePyro internalsSMCFilter
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
15