pytorch/ignite

Improve distributed tests for Confusion Matrix (CM and MLCM)

Open

#1657 aperta il 20 feb 2021

Vedi su GitHub
 (8 commenti) (0 reazioni) (0 assegnatari)Python (602 fork)batch import
HacktoberfestPyDataGlobalenhancementhelp wantedmodule: metrics

Metriche repository

Star
 (4313 star)
Metriche merge PR
 (Merge medio 18g 23h) (19 PR mergiate in 30 g)

Descrizione

Currently, the testing data is generated without taking into account distributed context: https://github.com/pytorch/ignite/blob/e17acc740d38909ddbbed6648423750abe593e58/tests/ignite/metrics/test_confusion_matrix.py#L559-L565

same for MultiLabelConfusionMatrix tests.

We would like to rewrite the tests in a similar way as here : https://github.com/pytorch/ignite/blob/e17acc740d38909ddbbed6648423750abe593e58/tests/ignite/metrics/test_recall.py#L778-L785

See https://github.com/pytorch/ignite/issues#issuecomment-782750122

cc @touqir14

Guida contributor

Direzione di ricerca
Studia l'esempio collegato in test recall.py per comprendere il modello di test distribuito, poi adatta la generazione dei dati di test e le asserzioni della matrice di confusione per funzionare con più processi.
Tech stack
pythonpytorch
Dominio
backendtesting
Tipo issue
Test
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Mezza giornata
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Abbastanza chiara
Prerequisiti
PythonPyTorchTesting
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
55