pytorch/ignite

Implementation of RecSys Metrics

Open

Aperta il 23 lug 2022

Vedi su GitHub
 (12 commenti) (0 reazioni) (0 assegnatari)Python (4313 star) (602 fork)batch import
enhancementhelp wanted

Descrizione

🚀 Feature

To add some more metrics used in Recommendation Systems with tests that can directly be used. Here is the list (@alykhantejani @vfdev-5 feel free to add more):

  • NDCG

Guida contributor

Tech stack
python
Dominio
machine learning
Tipo issue
feature
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
1-3 hours
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
stale
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
clear
Prerequisiti
familiarity with recommendation system metricsPyTorch basics
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
50
Direzione di ricerca
Examine the existing NDCG implementation in the ignite/metrics/ directory to understand the pattern. Identify which metrics from the list are still missing (e.g., MAP, MRR, etc.). Implement each metric with unit tests following the existing test structure. Refer to common recommendation system metric definitions and ensure consistency with PyTorch tensor operations.