Examples: can remove cross-validation from outlier detection
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 5/5
- Thời gian dự kiến
- Hơn một tuần
- Mức phù hợp với người mới
- 30/100
- Loại issue
- Tính năng
- Độ rõ ràng
- Cần làm rõ
- Mức độ hoạt động
- Đình trệ
- Công nghệ
- jupyter-notebook
- Lĩnh vực
- machine-learning
Hướng nghiên cứu
Bắt đầu với ví dụ outlier_detection_cifar10 được liên kết trong issue và kiểm tra cách các thiết lập OOD train/test hiện tại sử dụng cross-validation. Thêm hoặc đánh giá thiết lập training được đề xuất với outliers, so sánh xem cross-validation có giúp ích hay không, rồi cập nhật ví dụ dựa trên kết quả đó.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
This example: https://github.com/cleanlab/examples/tree/master/outlier_detection_cifar10
could become much more straightforward without cross-validation now that we've seen it doesn't help too much in the train/test OOD settings.
But to truly assess the utility of cross-validation, we should first include an additional benchmark setting where we evaluate OOD detection on a training dataset with some outliers included (during training not just during testing). Cross-validation may still help in this setting.
- Ngôn ngữ chính
- Jupyter Notebook
- Star
- 136
- Fork
- 28
- Chỉ số merge pull request
- Không có pull request nào được merge trong 30 ngày
Chuẩn bị môi trường
Dự án này không cung cấp dev container, Dockerfile hay hướng dẫn đóng góp, nên bạn cần tự thiết lập môi trường: hãy bắt đầu từ README và xem hướng dẫn đóng góp lần đầu của chúng tôi để biết các bước chung.
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của cleanlab/examples
-
help wanted
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100
-
run datalab on food datasetĐang mởhelp wanted
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 42/100
-
good first issue help wanted
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100
-
help wanted
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100
Tất cả issue của cleanlab/examples
Issue tương tự
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 62/100
mlr-org/mlr3cmprsk#42 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
good first issue
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 82/100
Maintainer thường phản hồi trong vòng 1 ngày
-
[BUG] CoxPH with strata fails predict_proba after successful fitCó thể đã có người làm Có pull request liên kết đang mở hoặc đã được merge. Đang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100
Maintainer thường phản hồi trong vòng 1 ngày
-
bot-triaged module: LrScheduler module: optimizer triaged
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 70/100
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
huggingface/peft#3999 ·
Maintainer thường phản hồi trong vòng 1 ngày