[EVAL] Adding PHARE

Metriche repository

Star

2496 stelle (2496 stelle)

Metriche merge PR

Metriche PR in attesa (Metriche PR in attesa)

Descrizione

Guida contributor

Direzione di ricerca

Implementa il benchmark di valutazione PHARE aggiungendo il dataset da Hugging Face (giskardai/phare), implementando le metriche e la configurazione del task nel framework lighteval, e creando un esempio di valutazione.

Tech stack

python

Dominio

machine learning

Tipo issue

Funzionalità

DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.

3

Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.

1-2 giorni

Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.

Attiva

ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.

Abbastanza chiara

Prerequisiti

Python

Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.

60