lmcinnes/umap

Create a benchmark to track speed improvements / regressions

Open

#293 aperta il 11 set 2019

Vedi su GitHub
 (8 commenti) (0 reazioni) (0 assegnatari)Python (751 fork)batch import
help wanted

Metriche repository

Star
 (6478 star)
Metriche merge PR
 (Merge medio 12h 3m) (15 PR mergiate in 30 g)

Descrizione

Considering a lot of time goes into optimizing the speed of UMAP it seems necessary to have some kind of bechmark/suite to evaluate performance.

EDIT: A collection of useful links to get started: Tracking System Capabilities: https://github.com/giampaolo/psutil Datasets: https://www.tensorflow.org/datasets Benchmarking: https://pypi.org/project/pyperf/

Guida contributor

Direzione di ricerca
Indaga su come impostare una suite di benchmark per UMAP utilizzando pyperf (https://pypi.org/project/pyperf/). Considera l'uso dei dataset di TensorFlow (https://www.tensorflow.org/datasets) per dataset standardizzati e psutil (https://github.com/giampaolo/psutil) per monitorare le capacità del sistema. Esamina la codebase esistente per identificare le aree chiave sensibili alle prestazioni (ad esempio, ricerca dei vicini più prossimi, routine di ottimizzazione) e progetta benchmark che misurino miglioramenti o regressioni della velocità in quei componenti.
Tech stack
python
Dominio
performancedatabackend
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
1-2 giorni
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Datata
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Abbastanza chiara
Prerequisiti
Pythonbenchmarkingperformance testing
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
60