Assignment strategy (FP2.5.8) - double assignment, one prediction for multiple references.. also covered?
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 5/5
- Thời gian dự kiến
- Hơn một tuần
- Mức phù hợp với người mới
- 25/100
- Loại issue
- Lỗi
- Độ rõ ràng
- Cần làm rõ
- Mức độ hoạt động
- Đình trệ
- Công nghệ
- python
- Lĩnh vực
- computer-vision, machine-learning
Hướng nghiên cứu
Bắt đầu với MetricsReloaded/utility/assignment_localization.py, xung quanh đoạn mã được tham chiếu để giải quyết sự mơ hồ ở dòng 510, sau đó so sánh câu hỏi với issue BraTS-2023-Metrics được liên kết. Xác định cách xử lý dự kiến đối với các tham chiếu và dự đoán không khớp, cũng như cách định nghĩa số lượng TP, FP và FN; công việc được hoàn tất khi có một cách giải quyết được ghi rõ trong tài liệu hoặc được kiểm thử.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
Dear Metric Reloaded Team,
I have worked with Brain metastases data, and I was confused when I evaluated lesion-wise (instance-level) detection metrics (F1 -score) from predicted segmentation. Currently, I match each lesion if there is overlap, or overlap(DSC) > 0.1. And I observed that there are quite multiple assigned cases in both ways (one pred - multiple GTs, multiple pred - one GT). That's how I visit your great work (Metric Reloaded) to get some guidance.
I have briefly checked resolve ambiguity code, but I'm still not sure whether this code also treat the remained GTs as FN or ignore them. Or counting TPs is always based on GTs?
I illustrated this issue with the image in the below repository as well, since I used their code.
https://github.com/rachitsaluja/BraTS-2023-Metrics/issues/11
- Ngôn ngữ chính
- Python
- Star
- 105
- Fork
- 18
- Chỉ số merge pull request
- Không có pull request nào được merge trong 30 ngày
Chuẩn bị môi trường
Dự án này không cung cấp dev container, Dockerfile hay hướng dẫn đóng góp, nên bạn cần tự thiết lập môi trường: hãy bắt đầu từ README và xem hướng dẫn đóng góp lần đầu của chúng tôi để biết các bước chung.
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của Project-MONAI/MetricsReloaded
-
Documentation: AssignmentMappingĐang mở
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 68/100
-
MorphologyOps.foreground_component() ignores connectivity parameter, always uses 1-connectivityCó thể đã có người làm @Mirochill đã nhận 141 ngày trước. Đang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 55/100
-
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 35/100
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 50/100
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 52/100
Tất cả issue của Project-MONAI/MetricsReloaded
Issue tương tự
-
[Bug]: LangGraph Store sync put bypasses namespace validationCó thể đã có người làm @ktz03 đã nhận hôm nay. Đang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100
volcengine/OpenViking#6050 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
[Bug]: Streamed /v1/chat/completions sends unredacted agent error text (keys) in the final chunkCó thể đã có người làm @rodricksz4h5 đã nhận hôm nay. Đang mởarea/streaming comp/gateway P2 type/security
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
NousResearch/hermes-agent#138245 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
[oblt-aw][autodoc] Update user onboarding guide for mandatory trigger CODEOWNERS stepCó thể đã có người làm @github-actions đã nhận hôm nay. Đang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 66/100
Maintainer thường phản hồi trong vòng 1 ngày
-
correction metadata
Độ khó 2/5 Dưới một giờ Mức phù hợp với người mới 68/100
acl-org/acl-anthology#10378 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
cloudtrail_multi_region_enabled_logging_management_events fails when the advanced event selector has a custom nameCó thể đã có người làm @12YYCCYY16 đã nhận hôm nay. Đang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
prowler-cloud/prowler#13033 ·
Maintainer thường phản hồi trong vòng 1 ngày