Verify evals on Papers with Code

Đang mở Phù hợp với người mới
#13 0 bình luận 0 reaction 0 người được giao Xem trên GitHub

Chưa có ai nhận issue này.

Đánh giá

Độ khó
2/5
Thời gian dự kiến
1-3 giờ
Mức phù hợp với người mới
62/100
Loại issue
Tài liệu
Độ rõ ràng
Khá rõ ràng
Mức độ hoạt động
Sôi nổi
Lĩnh vực
machine-learning

Hướng nghiên cứu

Bắt đầu với bài báo được liên kết và trang Papers with Code của bài báo đó, sau đó so sánh tám đánh giá được liệt kê với các kết quả được báo cáo trong bài báo. Kiểm tra từng điểm số, tên mô hình, giao thức benchmark và siêu dữ liệu về mức độ mở; công việc được xem là hoàn thành khi bạn xác nhận chúng hoặc báo cáo các chỉnh sửa cụ thể cần thiết.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Mô tả

Hi,

Niels here from the open-source team at Hugging Face. Congratulations on your work!

I've made the paper and 8 paper-native evaluations available on Papers with Code.

The paper has results on Reasoning, World Knowledge, Classic Language Modeling, and 1 additional task page.

Would it be possible to verify these results and let me know if any score, model name, benchmark protocol, or openness metadata should be corrected?

You can also edit the task, methods, project page, and GitHub URL directly from the paper page using your Hugging Face account.

Kind regards,

Niels

Ngôn ngữ chính
Python
Star
225
Fork
12
Không có pull request nào được merge trong 30 ngày

Hướng dẫn đóng góp

Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này

Bắt đầu từ đâu

  1. Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
  2. Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
  3. Fork repository và làm thay đổi trên một nhánh.
  4. Mở pull request có tham chiếu số hiệu của issue.

Issue khác của IBM/ModuleFormer

Tất cả issue của IBM/ModuleFormer

Issue tương tự

Thêm issue về Python

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.