mlfoundations/evalchemy
Automatic evals for LLMs
mlfoundations/evalchemy è adatto ai principianti?
Abbiamo visto troppo poche pull request recenti di contributori esterni su mlfoundations/evalchemy per dire quanto spesso vengono accettate. Al momento non è aperta nessuna issue adatta ai principianti; l'elenco qui sotto mostra le altre issue che abbiamo per questo repository.
- Stelle
- 613
- Fork
- 88
- Issue aperte per principianti
- 0
- Issue indicizzate
- 23
- Lingua principale
- HTML
- Licenza
- Nessun dato sulla licenza
- Ultimo push su GitHub
- 23/12/2025
- Ultima indicizzazione
- 19/9/2026
- Guida per i contributori
- Guida per i contributori
- Codice di condotta
- Nessun codice di condotta
- Label per principianti
- Nessuna label per principianti indicizzata
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Come contribuire a mlfoundations/evalchemy
- Leggi prima la guida per contribuire: spiega come i maintainer vogliono che le modifiche siano proposte, testate e revisionate.
- Segui il repository per sapere quando si apre una nuova issue adatta ai principianti, oppure guarda le altre issue qui sotto.
Le issue su cui forse qualcuno sta già lavorando sono in fondo alla lista. Ordina tutto per data
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 48/100
mlfoundations/evalchemy#161 ·
-
[bug] LiveCodeBenchv5Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 50/100
mlfoundations/evalchemy#149 ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 30/100
mlfoundations/evalchemy#147 ·
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 58/100
mlfoundations/evalchemy#145 ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 20/100
mlfoundations/evalchemy#144 ·
-
LM Eval Tasks not foundAperta
Difficoltà 3/5 1-2 giorni Idoneità per principianti 42/100
mlfoundations/evalchemy#143 ·
-
Difficoltà 3/5 1-2 giorni Idoneità per principianti 35/100
mlfoundations/evalchemy#142 ·
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100
mlfoundations/evalchemy#141 ·
-
Support for SWEBenchAperta
Difficoltà 5/5 Più di una settimana Idoneità per principianti 20/100
mlfoundations/evalchemy#140 · 1 commento ·
-
Request to add Debug modeAperta
Difficoltà 3/5 1-2 giorni Idoneità per principianti 35/100
mlfoundations/evalchemy#139 · 1 commento · 1 reazione ·
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 20/100
mlfoundations/evalchemy#132 ·
-
Difficoltà 3/5 1-2 giorni Idoneità per principianti 35/100
mlfoundations/evalchemy#129 · 1 reazione ·
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 20/100
mlfoundations/evalchemy#105 · 1 commento ·
-
Difficoltà 3/5 1-2 giorni Idoneità per principianti 35/100
mlfoundations/evalchemy#99 · 2 commenti · 4 reazioni ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 38/100
mlfoundations/evalchemy#96 · 2 commenti ·
-
Log samples to huggingfaceAperta
Difficoltà 3/5 1-2 giorni Idoneità per principianti 35/100
mlfoundations/evalchemy#89 ·
-
How to log model response?Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 30/100
mlfoundations/evalchemy#84 · 4 commenti ·
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 28/100
mlfoundations/evalchemy#46 ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100
mlfoundations/evalchemy#45 ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100
mlfoundations/evalchemy#31 · 1 reazione ·
-
Integrate Berkeley Function Calling Leaderboard into EvalchemyForse di nuovo libera @CharlieJCJ l’ha presa 689 giorni fa e non c’è nessuna pull request aperta. Aperta
mlfoundations/evalchemy#28 · 2 commenti · 2 reazioni · 1 assegnatario ·
-
[bug] GPQA-Diamond ground truth answers are all DForse già presa @neginraoof l’ha presa 230 giorni fa. Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 45/100
mlfoundations/evalchemy#155 · 2 commenti ·
-
vLLM backend crashes with "please provide at least one prompt" when max_gen_toks exceeds model context windowForse già presa @Ali-Elganzory l’ha presa 282 giorni fa. Aperta
Difficoltà 4/5 3-5 giorni Idoneità per principianti 45/100
mlfoundations/evalchemy#152 ·