Assignment strategy (FP2.5.8) - double assignment, one prediction for multiple references.. also covered?
まだ誰も着手していません。
評価
- 難易度
- 5/5
- 見積もり時間
- 1週間以上
- 初心者へのやさしさ
- 25/100
- issue の種類
- バグ
- 明瞭さ
- 説明が足りない
- 活発さ
- 停滞
- 技術スタック
- python
調査の方向性
まず、510行目付近の参照されている曖昧性解消コードについて MetricsReloaded/utility/assignment_localization.py を確認し、その後、リンクされている BraTS-2023-Metrics issue と質問を比較してください。一致しない参照と予測をどのように扱うことが意図されているか、また TP、FP、FN のカウントがどのように定義されるかを明確にしてください。明確に文書化された、またはテストされた解決策があれば完了です。
索引モデルが issue の本文から書いたものです。
説明
Dear Metric Reloaded Team,
I have worked with Brain metastases data, and I was confused when I evaluated lesion-wise (instance-level) detection metrics (F1 -score) from predicted segmentation. Currently, I match each lesion if there is overlap, or overlap(DSC) > 0.1. And I observed that there are quite multiple assigned cases in both ways (one pred - multiple GTs, multiple pred - one GT). That's how I visit your great work (Metric Reloaded) to get some guidance.
I have briefly checked resolve ambiguity code, but I'm still not sure whether this code also treat the remained GTs as FN or ignore them. Or counting TPs is always based on GTs?
I illustrated this issue with the image in the below repository as well, since I used their code.
https://github.com/rachitsaluja/BraTS-2023-Metrics/issues/11
- 主要言語
- Python
- スター
- 104
- フォーク
- 18
- PR マージ指標
- 30日以内にマージされた PR はありません
コントリビューションガイド
このリポジトリのコントリビューションガイドは索引されていません
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
Project-MONAI/MetricsReloaded のほかの issue
-
難易度 1/5 1時間未満 初心者へのやさしさ 68/100
-
MorphologyOps.foreground_component() ignores connectivity parameter, always uses 1-connectivity オープン
難易度 2/5 1〜3時間 初心者へのやさしさ 55/100
-
難易度 3/5 1〜2日 初心者へのやさしさ 35/100
-
難易度 2/5 1〜3時間 初心者へのやさしさ 50/100
-
難易度 2/5 1〜3時間 初心者へのやさしさ 52/100
Project-MONAI/MetricsReloaded の issue をすべて見る
似ている issue
-
難易度 1/5 1時間未満 初心者へのやさしさ 75/100
-
hcocena オープンpolicies-accepted pre-review precheck-passed
難易度 1/5 1時間未満 初心者へのやさしさ 88/100
Bioconductor/BiocContributions#214 · コメント 5 件 ·
-
難易度 1/5 1時間未満 初心者へのやさしさ 92/100
TencentCloud/Octop#1169 · コメント 1 件 ·
-
難易度 2/5 1〜3時間 初心者へのやさしさ 70/100
521xueweihan/HelloGitHub#3778 ·
-
The version checker's trailing attribute region has no control for a less-than inside a quoted value オープンarea: dashboard area: tests bug perceived difficulty: 2 python
難易度 2/5 1〜3時間 初心者へのやさしさ 84/100
Nitjsefnie-Harness-Commons/daedalus#1105 · コメント 1 件 ·