huggingface/lighteval

[FT] Improve Documentation and Examples

Aperta

#682 aperta il 21 apr 2025

Vedi su GitHub
 (6 commenti) (1 reazione) (0 assegnatari)Python (514 fork)auto 404
documentationfeaturegood first issuehelp wanted

Metriche repository

Star
 (2496 stelle)
Metriche merge PR
 (Metriche PR in attesa)

Descrizione

Issue encountered

We need better documentation for locally trained LLMs. I am experimenting with finetunes and LoRA adapters but I am having a bad time ironing out the required values for the yaml config.

Solution/Feature

Provide working examples for adapter configurations.

Possible alternatives

Make the library more coherent? --override-batch-size no longer works but it is still available under lighteval accelerate.

Guida contributor

Direzione di ricerca
Rivedi gli esempi di configurazione degli adapter esistenti nel repository e nella documentazione. Identifica le parti mancanti e crea esempi chiari e funzionanti per gli adapter LoRA.
Tech stack
python
Dominio
ai
Tipo issue
Documentazione
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
2
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
1-3 ore
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
PythonGit
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
75