Fundamental issue: test environment reproducibility
まだ誰も着手していません。
評価
- 難易度
- 5/5
- 見積もり時間
- 1週間以上
- 初心者へのやさしさ
- 25/100
- issue の種類
- 機能追加
- 明瞭さ
- 説明が足りない
- 活発さ
- 停滞
- 技術スタック
- docker
調査の方向性
まず、ここで説明されているテスト環境の入力を確認します。rootfs スナップショット、コンパイラー Docker イメージのスナップショット、保持期間、外部コンポーネントを取得するテストです。PR 2695 を具体例として使用し、プラットフォームテストのパラメーターがどのように記録されているかを調べます。完了条件は、再現性の欠落を特定し、バージョン管理された入力から失敗と成功を再現できるように改善策を定義することです。
索引モデルが issue の本文から書いたものです。
説明
To reproduce test failure reliably we need to know:
1)rootfs snapshot, usually updated weekly
2)compiler docker image snapshot - usually updated weekly and depends if there is upstream updates
3)other components usually added to rootfs, so they are consistent with rootfs version
Knowing all this parameters and storing images enough time will allow to reproduce test failure/pass in reasonable timeframe (how long they are stored on storage)
But, many tests fetch components from external sources, and many of them wont be consistent with rootfs provided by KernelCI, which means we might face reproducibility issue.
We need to research this topic, review tests and improve test reproducibility where it is required.
Example: https://github.com/kernelci/kernelci-core/pull/2695
We fetch platform test parameters, and we might not know what was version when it fails.
- 主要言語
- Python
- スター
- 14
- フォーク
- 32
- 平均マージ
- 10時間 18分
- マージ済み PR（30日）
- 5
環境構築
このプロジェクトには開発コンテナ、Dockerfile、コントリビューションガイドがありません。まず README を読み、一般的な手順ははじめてのコントリビューションガイドを参照してください。
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
kernelci/kernelci-project のほかの issue
-
難易度 4/5 3〜5日 初心者へのやさしさ 20/100
kernelci/kernelci-project#585 ·
-
question sysadmin
難易度 5/5 1週間以上 初心者へのやさしさ 35/100
kernelci/kernelci-project#580 ·
-
難易度 5/5 1週間以上 初心者へのやさしさ 30/100
kernelci/kernelci-project#579 ·
-
Make sure kunit tests working properly, especially crypto再び着手できるかも @nuclearcat が 174 日前に担当しましたが、オープン中のプルリクエストはありません。 オープン
kernelci/kernelci-project#568 · 担当者 1 名 ·
-
Proposal for weekly conference calls (and probably others)再び着手できるかも @nuclearcat が 257 日前に担当しましたが、オープン中のプルリクエストはありません。 オープン
kernelci/kernelci-project#562 · コメント 10 件 · 担当者 1 名 ·
kernelci/kernelci-project の issue をすべて見る
似ている issue
-
area: desktop area: website priority: P2 type: feature
難易度 2/5 1〜3時間 初心者へのやさしさ 62/100
appandflow/stim#3411 · コメント 1 件 ·
メンテナーはふだん 1 日以内に返信
-
bug
難易度 2/5 1時間未満 初心者へのやさしさ 88/100
baptistehamon/lsapy#185 ·
メンテナーはふだん 1 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 82/100
PolicyEngine/policyengine-us#10073 ·
メンテナーはふだん 2 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 72/100
syedhamidali/radarx#277 ·
メンテナーはふだん 1 日以内に返信
-
bug
難易度 2/5 1〜3時間 初心者へのやさしさ 68/100
Arekkazu/sgpmp-backend#549 ·
メンテナーはふだん 1 日以内に返信