Should `score()`/`apply_metrics()` return warning about failed metrics in a batch?
メンテナーはふだん 1 日以内に返信
まだ誰も着手していません。
- #1085 @nikosbosse による — マージされずにクローズ
評価
調査の方向性
まず pull request #803 の議論と、エラーの延期についてのリンク先のブログ記事を確認します。成功したスコアが出力されるまで、batch 実行で failed-metric の警告を延期すべきかどうかを判断し、実装箇所とテスト箇所を特定する前に、期待される動作を定義します。
索引モデルが issue の本文から書いたものです。
説明
Should we also print the warnings in a batch instead of eagerly at the time of occurrence? They could easily get lost in the other warnings as the functions are getting executed.
I imagine a setup where at the time of printing the successful scores dt, we also print "In addition, the following metrics failed with the following warning". This is nicely discussed in this blog post about deferring errors. Worth considering.
Originally posted by @jamesmbaazam in https://github.com/epiforecasts/scoringutils/pull/803#discussion_r1592175575
- 主要言語
- R
- スター
- 65
- フォーク
- 24
- 平均マージ
- 1時間 24分
- マージ済み PR（30日）
- 2
環境構築
このプロジェクトの開発コンテナを、あなたの GitHub アカウントでブラウザ上に起動します。
- Dockerfile・Docker Compose ファイルなし
- プルリクエストのテンプレートあり
- コントリビューションガイドを読む
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
epiforecasts/scoringutils のほかの issue
-
難易度 2/5 1〜3時間 初心者へのやさしさ 88/100
epiforecasts/scoringutils#1264 ·
メンテナーはふだん 1 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 76/100
epiforecasts/scoringutils#1265 ·
メンテナーはふだん 1 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 82/100
epiforecasts/scoringutils#1260 ·
メンテナーはふだん 1 日以内に返信
-
Incorrect guidance in `NEWS.md` re `add_relative_skill()`?対応中かも @nikosbosse が 3 日前に担当しました。 オープンbug
難易度 2/5 1〜3時間 初心者へのやさしさ 68/100
epiforecasts/scoringutils#1226 · コメント 1 件 · リアクション 2 件 ·
メンテナーはふだん 1 日以内に返信
-
get_pit_histogram(): unsorted breaks produce negative densities; num_bins = 1 returns an empty table対応中かも @nikosbosse が 3 日前に担当しました。 オープンbug
難易度 2/5 1〜3時間 初心者へのやさしさ 68/100
epiforecasts/scoringutils#1219 ·
メンテナーはふだん 1 日以内に返信
epiforecasts/scoringutils の issue をすべて見る
似ている issue
-
難易度 2/5 1〜3時間 初心者へのやさしさ 68/100
waldronlab/bugphyzz#301 ·
メンテナーはふだん 1 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 62/100
-
難易度 2/5 1〜3時間 初心者へのやさしさ 78/100
r-lib/tree-sitter-r#209 ·
-
難易度 1/5 1時間未満 初心者へのやさしさ 67/100
-
難易度 1/5 1時間未満 初心者へのやさしさ 79/100
cran-task-views/CausalInference#52 · コメント 1 件 ·