microsoft/FLAML

Make predict() return "Undetected" in the classification estimator if confidence is below threshold

Open

#355 ouverte le 23 déc. 2021

Voir sur GitHub
 (0 commentaires) (0 réactions) (0 assignés)Jupyter Notebook (560 forks)github user discovery
enhancementhelp wanted

Métriques du dépôt

Stars
 (4 364 stars)
Métriques de merge PR
 (Métriques PR en attente)

Description

Use case: flower recognition Input: flower photo Output: flower name

Right now if you input a flower that is not among the classes, predict() will return the one closest to it which is wrong. The right would be telling the user that it was not recognized. One way to do it is making the estimator produce a confidence float [0-1]. Then make predict() accept a confidence threshold along with the data, which if not surpassed returns "Unrecognized".

Guide contributeur

Direction de recherche
Examinez la méthode predict() actuelle dans l'estimateur de classification pour comprendre comment les predictions sont renvoyées, puis modifiez la pour accepter un paramètre de seuil de confiance et renvoyer 'Non detecte' lorsque la confiance est inferieure a ce seuil.
Stack technique
python
Domaine
machine learning
Type d'issue
Fonctionnalité
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
2
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
Une demi journée
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
Pythonscikit learn
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
65