Assignment strategy (FP2.5.8) - double assignment, one prediction for multiple references.. also covered?
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 5/5
- Tempo stimato
- Più di una settimana
- Idoneità per principianti
- 25/100
- Tipo di issue
- Bug
- Chiarezza
- Da chiarire
- Stato di attività
- Ferma
- Stack tecnologico
- python
- Ambito
- computer-vision, machine-learning
Direzione di ricerca
Iniziare da MetricsReloaded/utility/assignment_localization.py intorno al codice referenziato per la risoluzione delle ambiguità alla riga 510, quindi confrontare la domanda con l’issue collegata di BraTS-2023-Metrics. Determinare il trattamento previsto per i riferimenti e le predizioni non corrispondenti e come vengono definiti i conteggi di TP, FP e FN; il lavoro è completato quando esiste una risoluzione chiaramente documentata o testata.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Dear Metric Reloaded Team,
I have worked with Brain metastases data, and I was confused when I evaluated lesion-wise (instance-level) detection metrics (F1 -score) from predicted segmentation. Currently, I match each lesion if there is overlap, or overlap(DSC) > 0.1. And I observed that there are quite multiple assigned cases in both ways (one pred - multiple GTs, multiple pred - one GT). That's how I visit your great work (Metric Reloaded) to get some guidance.
I have briefly checked resolve ambiguity code, but I'm still not sure whether this code also treat the remained GTs as FN or ignore them. Or counting TPs is always based on GTs?
I illustrated this issue with the image in the below repository as well, since I used their code.
https://github.com/rachitsaluja/BraTS-2023-Metrics/issues/11
- Lingua principale
- Python
- Stelle
- 104
- Fork
- 18
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Guida per i contributori
Nessuna guida per i contributori indicizzata per questo repository
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di Project-MONAI/MetricsReloaded
-
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 68/100
-
MorphologyOps.foreground_component() ignores connectivity parameter, always uses 1-connectivity Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 55/100
-
Difficoltà 3/5 1-2 giorni Idoneità per principianti 35/100
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 50/100
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 52/100
Tutte le issue di Project-MONAI/MetricsReloaded
Issue simili
-
area: harness bug status: needs-triage
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
Human-Agent-Society/reef#625 ·
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 70/100
-
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 80/100
learningequality/kolibri#15351 · 2 commenti ·
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
-
Name consistency Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
eellak/triplestore#65 · 1 commento ·