Setup testing
@tttyuntian 已经在做这个了。
开始于 2021年8月19日。
评估
这个 Issue 还没有评估数据。
描述
#56 set up a basic unit test, but we have to consider what kind of tests we want to run. This is especially important given that GitHub workflows does not have any GPU support, and will thus take a non-trivial amount of time to complete even a basic simple benchmark run. The proposal is to ideate some ways in which we could make tests modular and reasonably fast.
- 主要语言
- Python
- 星标
- 42
- 派生
- 24
- PR 合并指标
- 30 天内没有已合并 PR
环境准备
从这里开始
- 先读完整个 Issue，再读项目的贡献指南。
- 在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
- Fork 仓库，在一个分支上完成修改。
- 提交 Pull Request，并在描述里引用这个 Issue 编号。
bigscience-workshop/evaluation 的其他 Issue
-
难度 4/5 3-5 天 新手友好度 25/100
-
Refactor task template to merge multilingual.json and english.json可能重新可做 @wilsonyhlee 于 1850 天前认领，目前没有进行中的 PR。 未关闭
bigscience-workshop/evaluation#64 · 已指派 1 人 ·
-
难度 5/5 一周以上 新手友好度 20/100
bigscience-workshop/evaluation#61 · 2 条评论 · 3 个 reaction ·
-
Start overleaf for benchmark tech report可能重新可做 @arunraja-hub 于 1861 天前认领，目前没有进行中的 PR。 未关闭documentation
bigscience-workshop/evaluation#54 · 1 条评论 · 3 个 reaction · 已指派 2 人 ·
-
translate validation prompts into all training languages可能重新可做 @epavlick 于 1871 天前认领，目前没有进行中的 PR。 未关闭multilingual simple_benchmark
bigscience-workshop/evaluation#50 · 9 条评论 · 已指派 2 人 ·
查看 bigscience-workshop/evaluation 的全部 Issue
相似的 Issue
-
难度 2/5 1-3 小时 新手友好度 76/100
PedestrianDynamics/pyFDS-Evac#199 ·
维护者通常 1 天内回复
-
难度 2/5 1-3 小时 新手友好度 65/100
521xueweihan/HelloGitHub#3790 ·
-
难度 2/5 1-3 小时 新手友好度 78/100
sandialabs/atlas-ui-3#978 ·
维护者通常 1 天内回复
-
area: tests perceived difficulty: 2
难度 2/5 1-3 小时 新手友好度 72/100
Nitjsefnie-Harness-Commons/daedalus#1255 ·
维护者通常 1 天内回复
-
难度 2/5 1-3 小时 新手友好度 86/100
EleutherAI/lm-evaluation-harness#4256 ·
维护者通常 1 天内回复