Fundamental issue: test environment reproducibility
还没有人认领这个 Issue。
评估
- 难度
- 5/5
- 预计耗时
- 一周以上
- 新手友好度
- 25/100
- Issue 类型
- 功能
- 描述清晰度
- 需要澄清
- 活跃度
- 停滞
- 技术栈
- docker
调研方向
首先检查此处描述的测试环境输入:rootfs 快照、编译器 Docker 镜像快照、保留期限,以及会获取外部组件的测试。以 PR 2695 为具体示例,检查平台测试参数是如何记录的。完成标准是识别可复现性方面的缺口,并定义改进措施,使失败和通过都能根据版本化的输入重新复现。
由索引模型根据 Issue 内容生成。
描述
To reproduce test failure reliably we need to know:
1)rootfs snapshot, usually updated weekly
2)compiler docker image snapshot - usually updated weekly and depends if there is upstream updates
3)other components usually added to rootfs, so they are consistent with rootfs version
Knowing all this parameters and storing images enough time will allow to reproduce test failure/pass in reasonable timeframe (how long they are stored on storage)
But, many tests fetch components from external sources, and many of them wont be consistent with rootfs provided by KernelCI, which means we might face reproducibility issue.
We need to research this topic, review tests and improve test reproducibility where it is required.
Example: https://github.com/kernelci/kernelci-core/pull/2695
We fetch platform test parameters, and we might not know what was version when it fails.
- 主要语言
- Python
- 星标
- 14
- 派生
- 32
- 平均合并
- 10 小时 18 分钟
- 30 天内合并 PR
- 5
环境准备
这个项目没有提供开发容器、Dockerfile 或贡献指南,环境需要你自己搭建:先看它的 README,通用步骤见我们的新手贡献指南。
从这里开始
- 先读完整个 Issue,再读项目的贡献指南。
- 在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
- Fork 仓库,在一个分支上完成修改。
- 提交 Pull Request,并在描述里引用这个 Issue 编号。
kernelci/kernelci-project 的其他 Issue
-
难度 4/5 3-5 天 新手友好度 20/100
kernelci/kernelci-project#585 ·
-
question sysadmin
难度 5/5 一周以上 新手友好度 35/100
kernelci/kernelci-project#580 ·
-
难度 5/5 一周以上 新手友好度 30/100
kernelci/kernelci-project#579 ·
-
Make sure kunit tests working properly, especially crypto可能重新可做 @nuclearcat 于 172 天前认领,目前没有进行中的 PR。 未关闭
kernelci/kernelci-project#568 · 已指派 1 人 ·
-
Proposal for weekly conference calls (and probably others)可能重新可做 @nuclearcat 于 256 天前认领,目前没有进行中的 PR。 未关闭
kernelci/kernelci-project#562 · 10 条评论 · 已指派 1 人 ·
查看 kernelci/kernelci-project 的全部 Issue
相似的 Issue
-
HTML: <template> content is extracted as document text可能已有人在做 @ryanmeowy 今天认领。 未关闭bug html
难度 1/5 1 小时以内 新手友好度 82/100
docling-project/docling#4714 · 2 条评论 ·
维护者通常 1 天内回复
-
[BUG] Qdrant RAG client applies score_threshold to raw cosine similarity, not the 0-1 score it returns可能已有人在做 @roydonsequeira 今天认领。 未关闭bug
难度 2/5 1-3 小时 新手友好度 70/100
维护者通常 1 天内回复
-
Host test failure in core/direct_io.zig on Linux kernel 6.17: O_DIRECT open succeeds on procfs, so the test's 'plain' fd is not plain可能已有人在做 关联的 PR 仍在进行中或已合并。 未关闭
难度 2/5 1-3 小时 新手友好度 72/100
ashhart/TensorFold#536 ·
维护者通常 1 天内回复
-
area/install-update comp/cli duplicate P2 python:uv sweeper:risk-compatibility type/bug
难度 1/5 1 小时以内 新手友好度 62/100
NousResearch/hermes-agent#135440 · 1 条评论 ·
维护者通常 1 天内回复
-
bug
难度 2/5 1-3 小时 新手友好度 85/100
Deepak3699/Ai_Mentor#244 ·
维护者通常 1 天内回复