Improve progress tracker tool for large scale experiments

Abierto
  • ¿Algo no está bien?
#441 0 comentarios 0 reacciones 2 asignados Ver en GitHub

@sam-laing ya está trabajando en esto.

Desde el 29/10/2026.

Evaluación

Este issue todavía no se ha evaluado.

Descripción

enhancement T4.2 - model exploration

The purpose of the tool is to easily track the status of large number of runs and slurm jobs (planned, queued, running, finished, crashed), but also to obtain statistics about the runs (GPUh consumption & storage space realization and estimation, throughput, etc.)

  • Merge the multilingual scaling experiments across all HPC into a single output saved on GH (currently divided across HPCs here)
  • Fix bugs with user run attribution (sometimes the tool detects users who haven't done those runs)
  • Document where the run was executed (HPC, location) and on which data, data mix, etc.
  • Test the tool on a new set of training runs (muon scaling, diffusion etc.)
  • Document the usage of the tool (add README)
Lenguaje dominante
Sin datos de lenguaje
Estrellas
3
Forks
0
Sin PR fusionados en 30 d

Preparar el entorno

Este proyecto no incluye contenedor de desarrollo, Dockerfile ni guía de contribución, así que la configuración corre por tu cuenta: empieza por su README y consulta nuestra guía para la primera contribución para los pasos generales.

Primeros pasos

  1. Lee el issue completo y luego la guía de contribución del proyecto.
  2. Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
  3. Haz un fork del repositorio y trabaja en una rama.
  4. Abre un pull request que haga referencia al número del issue.

Más de OpenEuroLLM/Taskboard

Todos los issues de OpenEuroLLM/Taskboard

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.