warehouse_forklift_routing: `TIME_LIMIT = 60` kills inputs within the stated 30 s per test case
Maintainer thường phản hồi trong vòng 2 ngày
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 2/5
- Thời gian dự kiến
- 1-3 giờ
- Mức phù hợp với người mới
- 35/100
Hướng nghiên cứu
Start with tools/judge_local.py and the README wording for the 50 inputs and per test case time limits. Reproduce the reported failure using a solver deadline above 60 seconds per input, then inspect how TIME_LIMIT and timeout scoring are applied. Done when the stated limit and judge behavior agree and the reproduction no longer yields 0 of 50 OK solely because of the 60 second cap; the issue mentions draft PR #38.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
Task
warehouse_forklift_routing
Claim
The instruction gives "T=5 test cases per input" and "30 seconds per test case", but TIME_LIMIT = 60 kills an input at 60 s, and any timeout makes the total inf. This is Known issue 2. The README also calls the 50 inputs "test cases", so the limit has two readings.
Impact
A solver using more than 60 s per input gets no score: a real solver edited to a 125 s deadline gets 0 of 50 OK. We know of no real submission that does this: an Opus 5.5 run chose 20 s per input and noted the ambiguity.
Evidence and how to reproduce
Set a solver's own per-input deadline above 60 s and grade with tools/judge_local.py: valid: false, 0 of 50 OK.
Proposed fix
Draft PR: #38.
- Ngôn ngữ chính
- Python
- Star
- 474
- Fork
- 20
- Merge trung bình
- 3 ngày 6 giờ
- Pull request đã merge (30 ngày)
- 3
Chuẩn bị môi trường
- Không có Dockerfile hay tệp Docker Compose
- Không có mẫu pull request
- Đọc hướng dẫn đóng góp
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của ByteDance-Seed/EdgeBench
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 73/100
ByteDance-Seed/EdgeBench#48 ·
Maintainer thường phản hồi trong vòng 2 ngày
-
FFmpeg: public result hides whether failure occurred before correctness checksCó thể đã có người làm @loopx-agent đã nhận 2 ngày trước. Đang mở
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100
ByteDance-Seed/EdgeBench#57 ·
Maintainer thường phản hồi trong vòng 2 ngày
-
integer_compression_codec: stored size anchors are impossible for the documented Varint starterĐang mở
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 54/100
ByteDance-Seed/EdgeBench#52 ·
Maintainer thường phản hồi trong vòng 2 ngày
-
wesnoth_tactical_ai: top-level Lua files never run (`if io then` raises on an undefined global)Đang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 35/100
ByteDance-Seed/EdgeBench#51 ·
Maintainer thường phản hồi trong vòng 2 ngày
-
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 48/100
ByteDance-Seed/EdgeBench#50 ·
Maintainer thường phản hồi trong vòng 2 ngày
Tất cả issue của ByteDance-Seed/EdgeBench
Issue tương tự
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 83/100
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 87/100
Maintainer thường phản hồi trong vòng 7 ngày
-
good first issue
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
MTSWebServices/RecTools#330 ·
-
S9.7: Methodology pageĐang mởarea: web priority: P1 story
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 76/100
nfiasco/Quant-Time-Machine#151 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100
autowarefoundation/autoware_carla_scenario#2019 ·
Maintainer thường phản hồi trong vòng 1 ngày