Improve progress tracker tool for large scale experiments
@sam-laing arbeitet bereits daran.
Seit 29.10.2026.
Bewertung
Dieses Issue wurde noch nicht bewertet.
Beschreibung
The purpose of the tool is to easily track the status of large number of runs and slurm jobs (planned, queued, running, finished, crashed), but also to obtain statistics about the runs (GPUh consumption & storage space realization and estimation, throughput, etc.)
- Merge the multilingual scaling experiments across all HPC into a single output saved on GH (currently divided across HPCs here)
- Fix bugs with user run attribution (sometimes the tool detects users who haven't done those runs)
- Document where the run was executed (HPC, location) and on which data, data mix, etc.
- Test the tool on a new set of training runs (muon scaling, diffusion etc.)
- Document the usage of the tool (add README)
- Vorherrschende Sprache
- Keine Sprachdaten
- Sterne
- 3
- Forks
- 0
- PR-Merge-Kennzahlen
- Keine gemergten PRs in 30 T.
Entwicklungsumgebung
Dieses Projekt bietet weder Dev-Container noch Dockerfile noch Beitragsleitfaden – die Einrichtung liegt bei Ihnen. Beginnen Sie mit der README; die allgemeinen Schritte stehen in unserem Leitfaden für den ersten Beitrag.
Erste Schritte
- Lesen Sie das ganze Issue und danach den Beitragsleitfaden des Projekts.
- Schreiben Sie ins Issue, dass Sie es übernehmen — das erspart doppelte Arbeit.
- Forken Sie das Repository und arbeiten Sie in einem Branch.
- Öffnen Sie einen Pull Request, der die Issue-Nummer nennt.
Mehr aus OpenEuroLLM/Taskboard
-
Automatic evaluation reporting for model cardEvtl. vergeben @spyysalo hat das vor 1 Tag übernommen. OffenT4.5 - cont. eval WP5
OpenEuroLLM/Taskboard#445 · 1 Kommentar · 2 zugewiesene Personen ·
-
Collect evaluations for preludeEvtl. vergeben @TudorMN hat das vor 9 Tagen übernommen. Offen
OpenEuroLLM/Taskboard#443 · 19 Kommentare · 4 zugewiesene Personen ·
-
Investigate performance gap between current and Marianna's pipelineEvtl. vergeben @Ali-Elganzory hat das vor 9 Tagen übernommen. Offen4.6 post-training
OpenEuroLLM/Taskboard#442 · 3 Kommentare · 2 zugewiesene Personen ·
-
Nucleus sparse experiment setupEvtl. vergeben @aaronkl hat das vor 25 Tagen übernommen. OffenT4.1 - Optimization HPC T4.2 - model exploration
OpenEuroLLM/Taskboard#439 · 1 Kommentar · 1 Reaktion · 1 zugewiesene Person ·
-
Qwen3.5 35B-A3B hybrid MoE weak and strong scalingEvtl. vergeben @ibaucells hat das vor 25 Tagen übernommen. OffenT4.1 - Optimization HPC
OpenEuroLLM/Taskboard#438 · 2 Kommentare · 1 zugewiesene Person ·