Results summarizer fails when results folder is empty
还没有人认领这个 Issue。
评估
调研方向
从 mlperf_logging/result_summarizer/result_summarizer.py 开始,尤其关注 _compute_olympic_average、_compute_strong_scaling_scores 和 _update_summaries;针对一个空的 results 文件夹运行 result summarizer,以重现 traceback。当空文件夹的情况不再引发报告的 ZeroDivisionError,且现有的汇总行为保持不变时,即表示完成。
由索引模型根据 Issue 内容生成。
描述
This error occurs:
Traceback (most recent call last):
File "/opt/python3.9/lib/python3.9/runpy.py", line 197, in _run_module_as_main
return _run_code(code, main_globals, None,
File "/opt/python3.9/lib/python3.9/runpy.py", line 87, in _run_code
exec(code, run_globals)
File "/layers/google.python.pip/pip/lib/python3.9/site-packages/mlperf_logging/result_summarizer/__main__.py", line 3, in <module>
result_summarizer.main()
File "/layers/google.python.pip/pip/lib/python3.9/site-packages/mlperf_logging/result_summarizer/result_summarizer.py", line 626, in main
_update_summaries(args.folder)
File "/layers/google.python.pip/pip/lib/python3.9/site-packages/mlperf_logging/result_summarizer/result_summarizer.py", line 597, in _update_summaries
strong_scaling_summary, weak_scaling_summary = summarize_results(
File "/layers/google.python.pip/pip/lib/python3.9/site-packages/mlperf_logging/result_summarizer/result_summarizer.py", line 517, in summarize_results
strong_scaling_scores = _compute_strong_scaling_scores(
File "/layers/google.python.pip/pip/lib/python3.9/site-packages/mlperf_logging/result_summarizer/result_summarizer.py", line 330, in _compute_strong_scaling_scores
benchmark_scores[benchmark] = _compute_olympic_average(
File "/layers/google.python.pip/pip/lib/python3.9/site-packages/mlperf_logging/result_summarizer/result_summarizer.py", line 185, in _compute_olympic_average
return sum_of_scores * 1.0 / len(countable_scores)
ZeroDivisionError: float division by zero
A suggested solution would be to add a previous check in package checker to avoid this "ugly" error
- 主要语言
- Python
- 星标
- 43
- 派生
- 60
- 平均合并
- 2 天 14 小时
- 30 天内合并 PR
- 1
环境准备
- 没有 Dockerfile 或 Docker Compose 文件
- 没有 Pull Request 模板
- 阅读贡献指南
从这里开始
- 先读完整个 Issue,再读项目的贡献指南。
- 在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
- Fork 仓库,在一个分支上完成修改。
- 提交 Pull Request,并在描述里引用这个 Issue 编号。
mlcommons/logging 的其他 Issue
-
难度 2/5 1-3 小时 新手友好度 65/100
-
results summarizer is broken since 4.1.45可能已有人在做 @pgmpablo157321 于 1 天前认领。 未关闭
-
难度 5/5 一周以上 新手友好度 25/100
-
难度 5/5 一周以上 新手友好度 25/100
-
难度 5/5 一周以上 新手友好度 25/100
查看 mlcommons/logging 的全部 Issue
相似的 Issue
-
enhancement good first issue Stellar Wave trivial
难度 2/5 1-3 小时 新手友好度 75/100
StellarCanary/ProtocolCanary-Fixtures#258 ·
维护者通常 1 天内回复
-
github_actions
难度 2/5 1-3 小时 新手友好度 65/100
Hochfrequenz/aibap.mcp#578 ·
维护者通常 1 天内回复
-
bug
难度 2/5 1-3 小时 新手友好度 75/100
mishraprafful/multihull#150 ·
维护者通常 1 天内回复
-
难度 2/5 1-3 小时 新手友好度 72/100
维护者通常 2 天内回复
-
难度 2/5 1-3 小时 新手友好度 66/100
python-caldav/caldav#735 ·
维护者通常 1 天内回复