pytorch/ignite

Tracking the metrics with performance gaps on XLA

Chiusa

#2109 aperta il 14 lug 2021

Vedi su GitHubGuida contributor
 (2 commenti) (0 reazioni) (0 assegnatari)Python (602 fork)batch import
HacktoberfestPyDataGlobalenhancementhelp wantedmodule: metrics

Metriche repository

Star
 (4313 stelle)
Metriche merge PR
 (Merge medio 18g 23h) (19 PR mergiate in 30 g)

Descrizione

🚀 Feature

Since this commit, the metrics have been disabled with xla device due to a performance regression.

https://github.com/pytorch/ignite/blob/7bdf92322a15ba0bea71ad76f3f785b7ea5907c3/ignite/metrics/metric.py#L224-L225

To solve this, it would be interesting to track which metrics work fine and which have lack of performance. Thus, we could think about more specific enable / disable process.

Guida contributor

Direzione di ricerca
Indaga il commit di riferimento 002b595daa8a8345286c5e096c33e278948686a7 per capire perché le metriche sono state disabilitate su XLA. Esamina il codice nelle righe 224-225 di ignite/metrics/metric.py per identificare la regressione delle prestazioni. Quindi, misura quali metriche (ad esempio, Accuracy, Loss) funzionano bene su XLA e quali causano rallentamenti. L'obiettivo è proporre un meccanismo più granulare per abilitare/disabilitare le metriche sui dispositivi XLA.
Tech stack
python
Dominio
performancemachine learning
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
4
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
1-2 giorni
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Datata
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Richiede indagine
Prerequisiti
Nessuno
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
25