codalab/codabench

Codabench is a flexible, easy-to-use and reproducible benchmarking platform. Check our paper: https://hubs.li/Q01fwRWB0

Stelle: 176
Fork: 74
Issue aperte per principianti: 2
Issue indicizzate: 103
Merge medio: 3g 7h
PR unite (30g): 19

Lingua principale: Python
Licenza: Apache-2.0
Ultimo push su GitHub: 18/9/2026
Ultima indicizzazione: 20/9/2026
Guida per i contributori: Guida per i contributori
Codice di condotta: Codice di condotta
Label per principianti: Nessuna label per principianti indicizzata

Adatte ai principianti Tutto

Aperta Tutte

register error for 500 Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 15/100

codalab/codabench#2559 · 1 commento · Aperta il 21/9/2026
Invisible submissions stuck on scoreboard unevaluated Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

codalab/codabench#2558 · Aperta il 21/9/2026
Intermittent long-running submissions eventually fail Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 45/100

codalab/codabench#2557 · Aperta il 21/9/2026
Displaying incorrect number of participants Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 55/100

codalab/codabench#2554 · Aperta il 18/9/2026
MOT17 / MOT20 submissions stuck in Running for ~1 hour, then fail with "Child task failed or non-zero return code" and no logs Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 40/100

codalab/codabench#2548 · Aperta il 16/9/2026
[Urgent] Organizer accidentally deleted a leaderboard submission, can it be restored from backup? Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 20/100

codalab/codabench#2547 · Aperta il 16/9/2026
API Throttling - re-implement and fix for compute workers Aperta

codalab/codabench#2545 · 1 commento · 1 assegnatario · Aperta il 16/9/2026
CircleCI tests: use the `site_worker` Aperta

Post-it

codalab/codabench#2541 · 2 assegnatari · Aperta il 15/9/2026
Bulk download results/submissions: dead code in `submissions.py` Aperta

Post-it

Difficoltà 2/5 1-3 ore Idoneità per principianti 76/100

codalab/codabench#2538 · Aperta il 14/9/2026
Error is not clear after reaching the computation limit of a submission Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 52/100

codalab/codabench#2529 · Aperta il 7/9/2026
MOT20 leaderboard ranking issue Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 55/100

codalab/codabench#2512 · Aperta il 23/8/2026
No logs, but the submission failed... Aperta

Bug Competition-specific

Difficoltà 4/5 3-5 giorni Idoneità per principianti 40/100

codalab/codabench#2506 · 3 commenti · Aperta il 20/8/2026
Clear leaderboard Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 45/100

codalab/codabench#2505 · 1 commento · Aperta il 18/8/2026
Human in the Loop Issues Aperta

Enhancement

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

codalab/codabench#2504 · Aperta il 18/8/2026
Public Competitions API - next and previous links Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 55/100

codalab/codabench#2503 · Aperta il 17/8/2026
Submissions API architecture Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

codalab/codabench#2497 · Aperta il 8/8/2026
Dump issue: dates are saved with exact time Aperta

Beginner Bug

Difficoltà 3/5 1-2 giorni Idoneità per principianti 62/100

codalab/codabench#2490 · Aperta il 5/8/2026
Site Worker not cleaning up after itself (competition bundle) Aperta

Bug

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

codalab/codabench#2478 · Aperta il 24/7/2026
MOT20 leaderboard ranks a submission with no evaluation scores as #1 Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 52/100

codalab/codabench#2470 · Aperta il 23/7/2026
Task 2 repeatedly fails on ingestion_hostname-worker2 with no logs Aperta

Competition-specific User-specific

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

codalab/codabench#2465 · 1 commento · Aperta il 18/7/2026
MinIO has been discontinued Aperta

P1 Setup

Difficoltà 4/5 3-5 giorni Idoneità per principianti 45/100

codalab/codabench#2459 · Aperta il 3/7/2026
Username problem in email "User applied to your competition" Aperta

Beginner Bug

Difficoltà 2/5 1-3 ore Idoneità per principianti 55/100

codalab/codabench#2445 · Aperta il 24/6/2026
Codabench package Aperta

Post-it

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

codalab/codabench#2440 · Aperta il 23/6/2026
Worker monitoring feature: needed improvements Aperta

Enhancement

codalab/codabench#2438 · 1 assegnatario · Aperta il 23/6/2026
compute_worker re-executes submissions on broker redelivery, causing duplicate scores, hostname overwrite, and status flipping Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 45/100

codalab/codabench#2433 · Aperta il 18/6/2026
Improve "Participants" table Aperta

Enhancement UI

Difficoltà 3/5 1-2 giorni Idoneità per principianti 68/100

codalab/codabench#2428 · Aperta il 18/6/2026
Participant routing feature: needed improvements Aperta

Enhancement

codalab/codabench#2427 · 1 commento · 1 assegnatario · Aperta il 18/6/2026
Lost submissions on client side: POST /api/submissions/ is not idempotent Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 38/100

codalab/codabench#2425 · Aperta il 17/6/2026
Data integrity: score or leaderboard write fails after Finished status Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 58/100

codalab/codabench#2423 · Aperta il 17/6/2026
Submissions stuck in "Scoring" when broker error occurs during compute_worker PATCH (non-transactional re-enqueue) Aperta

Workers / Queues

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

codalab/codabench#2419 · Aperta il 16/6/2026
_update_submission() has no retry and _update_status() silently swallows exceptions, causing permanent submission loss Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 55/100

codalab/codabench#2415 · Aperta il 16/6/2026
Submission cleanup only recovers Running submissions, not Submitted/Preparing/Scoring Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 75/100

codalab/codabench#2413 · Aperta il 16/6/2026
Renaming "administrator", "collaborator", "organizers", etc. Aperta

Documentation Post-it

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

codalab/codabench#2412 · 1 commento · Aperta il 16/6/2026
Registration failed with 500 error and activation email not received Aperta

Bug User-specific

Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

codalab/codabench#2406 · 1 commento · Aperta il 8/6/2026
Add proper configuration management for compute-worker Aperta

Enhancement In Progress python python:uv Setup Workers / Queues

codalab/codabench#2404 · 1 assegnatario · Aperta il 4/6/2026
GPU worker: No score output Aperta

Competition-specific Workers / Queues

codalab/codabench#2399 · 16 commenti · 1 assegnatario · Aperta il 1/6/2026
MOT20 submission failed: child task failed Aperta

Bug Competition-specific

Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

codalab/codabench#2384 · 1 commento · Aperta il 24/5/2026
Compute worker: changing `HOST_DIRECTORY` not working Aperta

Bug Workers / Queues

Difficoltà 3/5 1-2 giorni Idoneità per principianti 48/100

codalab/codabench#2379 · Aperta il 19/5/2026
Feedback from a competition: auto-migration bug, stuck submissions, and username reset on re-run Aperta

Bug

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

codalab/codabench#2375 · 1 commento · Aperta il 13/5/2026
analytics page misreporting Aperta

Bug

codalab/codabench#2354 · 2 commenti · 1 assegnatario · Aperta il 28/4/2026
[COCO Segmentation] test-dev 2017 evaluation sever unavailable and Codabench do not have COCO benchmark Aperta

Competition-specific Discussion

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

codalab/codabench#2352 · 1 commento · Aperta il 26/4/2026
Method to track inactive/stale users and competitions Aperta

Enhancement

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

codalab/codabench#2344 · 1 commento · Aperta il 20/4/2026
MOT20 failed submission Aperta

Bug Competition-specific Workers / Queues

codalab/codabench#2343 · 3 commenti · 1 assegnatario · Aperta il 19/4/2026
Resource Interface: Submission file size display problem Aperta

Beginner Bug UI

Difficoltà 3/5 1-2 giorni Idoneità per principianti 52/100

codalab/codabench#2335 · Aperta il 15/4/2026
Resource Interface: Improve time format Aperta

Beginner Enhancement UI

Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100

codalab/codabench#2334 · Aperta il 15/4/2026
Sorting columns in Resources interface is flawed Aperta

Bug

Difficoltà 3/5 1-2 giorni Idoneità per principianti 55/100

codalab/codabench#2327 · Aperta il 9/4/2026
Computer worker upgrade feature Aperta

Enhancement Post-it

Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

codalab/codabench#2320 · Aperta il 7/4/2026
Codabench Account Activation Email Not Received Aperta

P1 Production

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

codalab/codabench#2263 · 8 commenti · Aperta il 13/3/2026
More control over submissions for organizers Aperta

Enhancement P1

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

codalab/codabench#2249 · 1 commento · Aperta il 9/3/2026
Auto-migration not working for multi-task Aperta

Bug

Difficoltà 3/5 1-2 giorni Idoneità per principianti 45/100

codalab/codabench#2247 · 1 commento · Aperta il 9/3/2026

Vengono mostrati i 100 più recenti

Questa pagina elenca solo ciò che è stato indicizzato di recente. Il filtro avanzato contiene l'inventario completo, ristretto per linguaggio, difficoltà e durata.

Apri il filtro avanzato

codalab/codabench

Vengono mostrati i 100 più recenti

Ricevi le nuove issue nella tua casella