Contribution workflow for adding benchmarks / tasks
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 5/5
- Thời gian dự kiến
- Hơn một tuần
- Mức phù hợp với người mới
- 25/100
- Loại issue
- Tính năng
- Độ rõ ràng
- Cần làm rõ
- Mức độ hoạt động
- Ít trao đổi
- Lĩnh vực
- developer-experience, documentation
Hướng nghiên cứu
Không có tệp triển khai, kiểm thử hoặc entry point nào được nêu. Hãy xem xét quy trình GitHub issue và PR hiện có, các biểu mẫu, các tệp có cấu trúc và việc gửi trực tiếp từ website, sau đó xác định workflow nào nên hỗ trợ các task, benchmark, paper, kết quả, bản sửa và review; được xem là hoàn tất khi dự án có một quy trình đóng góp đã được thống nhất và ghi chép.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
How can the community contribute new tasks, benchmarks, and SOTA results?
Hi! Thanks for bringing the project back — really happy to see it alive again.
My HF profile: https://huggingface.co/DenisKochetov
I wanted to open a broader issue about contributions, not only for myself but for the whole research / open-source community.
The original Papers with Code was extremely useful because it covered many tasks, benchmarks, papers, and SOTA tables. It was also very convenient that many arXiv papers had direct Papers with Code links.
Maintaining benchmark coverage across many areas is a huge amount of work, so this feels like a perfect case for community contributions. Researchers are naturally motivated to add their own papers and SOTA results, especially when they want their work to be visible and properly listed.
So my main question is:
What is the best way for users / researchers to contribute new tasks, benchmarks, datasets, papers, and results to the site?
For example:
- adding a new task
- adding or editing benchmark datasets
- submitting a paper/result to a leaderboard
- adding a new leaderboard for an existing task
- fixing metrics, links, or reported numbers
- helping review community submissions
I’m personally interested in helping with 3D generation, image-to-3D, text-to-3D, 3D reconstruction, and animal pose estimation.
Would love to understand what contribution workflow you prefer: GitHub issues, PRs, forms, structured files, direct website submissions, or something else.
Happy to help.
- Ngôn ngữ chính
- Không có dữ liệu ngôn ngữ
- Star
- 11
- Fork
- 1
- Chỉ số merge pull request
- Không có pull request nào được merge trong 30 ngày
Chuẩn bị môi trường
Dự án này không cung cấp dev container, Dockerfile hay hướng dẫn đóng góp, nên bạn cần tự thiết lập môi trường: hãy bắt đầu từ README và xem hướng dẫn đóng góp lần đầu của chúng tôi để biết các bước chung.
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của huggingface/paperswithcode-feedback
-
Data LicenseĐang mở
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 85/100
huggingface/paperswithcode-feedback#49 · 1 bình luận ·
-
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100
-
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 30/100
-
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 28/100
huggingface/paperswithcode-feedback#41 · 1 bình luận · 1 reaction ·
-
SuggestionsĐang mở
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100
Tất cả issue của huggingface/paperswithcode-feedback
Issue tương tự
-
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 76/100
Maintainer thường phản hồi trong vòng 1 ngày
-
lesson-submission pending-review
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 74/100
Ikalus1988/MisakaNet#3899 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
follow-up
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
Maintainer thường phản hồi trong vòng 1 ngày
-
[BUG] jackson3 JacksonJsonpMapper(ObjectMapper) fails to deserialize `_source` with "Trailing token" errorCó thể đã có người làm @junyeokk đã nhận hôm nay. Đang mởbug untriaged
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 82/100
opensearch-project/opensearch-java#2236 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
用户目录有单引号时,热加载时YAML解析崩溃Đang mởbug
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 68/100
dsh-market/dsh-market#1027 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày