HPLT4-BSC-EDU annealing mixtures
@jsaizant y travaille déjà.
Depuis le 22/9/2026.
Évaluation
Cette issue n'a pas encore été évaluée.
Description
Evaluations for the annealing runs for the BABY9B have finished (20BT-100BT scale), and more variants of annealing mixtures are needed. There is interest in experimenting with HPLT4-BSC-EDU annotations.
Based on statistics of HPLT4-BSC-EDU from @alex-shvets, design, compile and tokenize mixtures.
The task comes from #365 .
- Langage dominant
- Aucune donnée de langage
- Étoiles
- 3
- Forks
- 0
- Métriques de merge des PR
- Aucune PR mergée en 30 j
Préparer son environnement
Ce projet ne fournit ni conteneur de développement, ni Dockerfile, ni guide de contribution : l'installation est à votre charge. Commencez par son README, et consultez notre guide de la première contribution pour les étapes générales.
Par où commencer
- Lisez l'issue en entier, puis le guide de contribution du projet.
- Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
- Forkez le dépôt et travaillez sur une branche.
- Ouvrez une pull request qui référence le numéro de l'issue.
Autres issues de OpenEuroLLM/Taskboard
-
[nucleus sparse] Experiment setupPeut-être pris @aaronkl l’a pris il y a 11 jours. OuverteT4.1 - Optimization HPC T4.2 - model exploration
OpenEuroLLM/Taskboard#439 · 1 commentaire · 1 réaction · 1 personne assignée ·
-
Qwen3.5 35B-A3B hybrid MoE weak and strong scalingPeut-être pris @ibaucells l’a pris il y a 11 jours. OuverteT4.1 - Optimization HPC
OpenEuroLLM/Taskboard#438 · 2 commentaires · 1 personne assignée ·
-
Synthetic Generation for Multilingual Instruction TuningPeut-être pris @abhash-er l’a pris il y a 12 jours. Ouverte4.6 post-training
OpenEuroLLM/Taskboard#437 · 1 personne assignée ·
-
Safety and alignment evaluationPeut-être pris @BirgerMoell l’a pris il y a 12 jours. Ouverte4.6 post-training
OpenEuroLLM/Taskboard#436 · 1 personne assignée ·
-
Finding optimal dataset mixtures for DPOPeut-être pris @geoalgo l’a pris il y a 12 jours. Ouverte4.6 post-training
OpenEuroLLM/Taskboard#435 · 3 personnes assignées ·