倉庫議題

huggingface/lighteval

Lighteval is your all-in-one toolkit for evaluating LLMs across multiple backends

在 GitHub 查看
星標
 (2,496 顆星)
分叉
 (514 個分叉)
已索引議題
 (23 個已索引議題)
個開放新手議題
 (23 個開放的新手議題)
最近索引
2026年8月14日
最近 GitHub push
2026年6月29日
授權條款
MIT License
貢獻指南
沒有貢獻指南
行為準則
沒有行為準則
主要語言
Python
PR 合併指標
 (PR 指標待抓取)
新手標籤
good first issuehelp wanted

議題

23 個開放索引議題

開放
[EVAL] Long Horizon Execution
good first issuehelp wantednew-task
為什麼推薦帶有初學者友善標籤
帶有初學者友善標籤

huggingface / lighteval · #1056 · 2025年11月13日 · Python · 2,496 顆星

7 則留言0 個反應1 位負責人
開放
[FT] Add tests for nanotron
featuregood first issuehelp wantedignore-for-release
為什麼推薦尚無負責人 · 帶有初學者友善標籤
尚無負責人帶有初學者友善標籤

huggingface / lighteval · #765 · 2025年5月21日 · Python · 2,496 顆星

3 則留言0 個反應0 位負責人
開放
[EVAL] TauBench:
help wantednew-task
為什麼推薦尚無負責人 · 帶有初學者友善標籤
尚無負責人帶有初學者友善標籤

huggingface / lighteval · #741 · 2025年5月19日 · Python · 2,496 顆星

1 則留言0 個反應0 位負責人
開放
[BUG] Optimize tokenization
buggood first issuehelp wantedscience-team
為什麼推薦帶有初學者友善標籤
帶有初學者友善標籤

huggingface / lighteval · #732 · 2025年5月15日 · Python · 2,496 顆星

1 則留言0 個反應1 位負責人
開放
[EVAL] HELMET: long context evals
help wantednew-task
為什麼推薦尚無負責人 · 帶有初學者友善標籤
尚無負責人帶有初學者友善標籤

huggingface / lighteval · #731 · 2025年5月15日 · Python · 2,496 顆星

2 則留言0 個反應0 位負責人
開放
[EVAL] SWEBENCH multilingual
help wantednew-task
為什麼推薦尚無負責人 · 尚無留言
尚無負責人尚無留言帶有初學者友善標籤

huggingface / lighteval · #730 · 2025年5月15日 · Python · 2,496 顆星

0 則留言0 個反應0 位負責人
開放
[EVAL] Adding PHARE
good first issuehelp wantednew-task
為什麼推薦帶有初學者友善標籤
帶有初學者友善標籤

huggingface / lighteval · #696 · 2025年4月30日 · Python · 2,496 顆星

9 則留言0 個反應1 位負責人
開放
[FT] Improve Documentation and Examples
documentationfeaturegood first issuehelp wanted
為什麼推薦尚無負責人 · 帶有初學者友善標籤
尚無負責人帶有初學者友善標籤

huggingface / lighteval · #682 · 2025年4月21日 · Python · 2,496 顆星

6 則留言1 個反應0 位負責人
開放
[FT] Log progress bar on main process
featurehelp wantedscience-team
為什麼推薦尚無負責人 · 尚無留言
尚無負責人尚無留言帶有初學者友善標籤

huggingface / lighteval · #662 · 2025年4月7日 · Python · 2,496 顆星

0 則留言0 個反應0 位負責人
開放
[EVAL] Big-Bench Extra Hard (BBEH)
good first issuehelp wantednew-taskscience-team
為什麼推薦尚無負責人 · 帶有初學者友善標籤
尚無負責人帶有初學者友善標籤

huggingface / lighteval · #600 · 2025年3月3日 · Python · 2,496 顆星

3 則留言0 個反應0 位負責人
開放
[EVAL] Add TUMLU benchmark
good first issuehelp wantednew-task
為什麼推薦尚無負責人 · 帶有初學者友善標籤
尚無負責人帶有初學者友善標籤

huggingface / lighteval · #577 · 2025年2月19日 · Python · 2,496 顆星

10 則留言0 個反應0 位負責人