automl/auto-sklearn

Provide multi-class AUC ROC

Open

#1482 aperta il 19 mag 2022

Vedi su GitHub
 (10 commenti) (0 reazioni) (0 assegnatari)Python (1265 fork)batch import
Good first issueNeed contributorenhancement

Metriche repository

Star
 (7270 star)
Metriche merge PR
 (Nessuna PR mergiata in 30 g)

Descrizione

Scikit-learn provides multi-class options for area under curve: https://scikit-learn.org/stable/modules/generated/sklearn.metrics.roc_auc_score.html

We should provide the most common ones, such as the OVO Macro averaging used by Auto-Gluon.

Guida contributor

Direzione di ricerca
La richiesta riguarda l'aggiunta del supporto per AUC ROC multi classe in auto sklearn, in particolare la media macro OVO utilizzata in Auto Gluon. Il corpo del testo include collegamenti alla documentazione di roc auc score di scikit learn e all'implementazione di Auto Gluon. Per implementarla, studiare la funzione di scikit learn e il codice di Auto Gluon referenziato (https://github.com/awslabs/autogluon/blob/0b38dde5f698dbadfa1ce76aabda14505d9e3ead/core/src/autogluon/core/metrics/ init .py#L443). Quindi aggiungere una metrica simile al modulo metrics di auto sklearn, assicurandosi della compatibilità con il suo framework di valutazione.
Tech stack
python
Dominio
machine learningbackend
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
1-2 giorni
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
Pythonscikit learnMachine Learning basics
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
65