IntersectMBO/plutus

Add golden tests for the validation benchmarks

Open

#6,828 opened on 2025年2月10日

GitHub で見る
 (1 comment) (0 reactions) (0 assignees)Haskell (511 forks)batch import
BenchmarksGood first issueInternalTeststatus: triagedtech debt

Repository metrics

Stars
 (1,637 stars)
PR merge metrics
 (平均マージ 15d 11h) (30d で 13 merged PRs)

説明

Currently the validation benchmarks don't seem to have any golden tests ensuring that what scripts evaluate to doesn't change. Unlike e.g. nofib or bitwise benchmarks (and lists ones have some property tests). We should fix that, otherwise an apparent optimization might as well turn out to be a bug.

Same about marlowe?

コントリビューターガイド

調査方針
まず、同じリポジトリ内の 'nofib' および 'bitwise' ベンチマークに対するゴールデンテストの実装方法を調べてください（例：これらのベンチマークのテストファイルを参照）。パターンを理解します：おそらく、期待値を出力するスクリプトと、それらを比較するテストフレームワークが存在します。次に、同じパターンを 'validation' ベンチマークディレクトリに適用します。この課題では 'marlowe' にも言及されているため、それを含めるかどうかを決定します。ゴールデンテストを作成した後、それらを実行して合格することを確認します。失敗するテストがある場合は、ベンチマークが決定論的な出力を生成するかどうかを調査してください。
技術スタック
なし
領域
testing
Issue 種別
テスト
難度新しい貢献者にとっての実装難度です。1 は非常に小さな変更、5 は専門的な作業です。
3
推定時間経験ある貢献者が調査、実装、テスト、pull request 準備にかけるおおよその時間範囲です。
半日
活動状況Issue が今どれだけ取り組みやすいかを示します。新しい、活発、古い、ブロック中、またはメンテナー入力待ちなどです。
アクティブ
明確さ期待される変更、受け入れ条件、次の手順がどれだけ明確かを示します。
明確
前提条件
Git
初心者向け度初回貢献者にどれだけ取り組みやすいかを 1-100 で推定したスコアです。
70