Hacktoberfest 2026: los issues que los mantenedores marcaron para octubre, abiertos y aptos para principiantes. Explorar issues de Hacktoberfest

Convert the current tokenizer to handle the qwen chat-template faithfully.

Abierto
  • ¿Algo no está bien?
#370 5 comentarios 0 reacciones 1 asignado Ver en GitHub

@Apsod ya está trabajando en esto.

Desde el 17/8/2026.

Evaluación

Este issue todavía no se ha evaluado.

Descripción

4.6 post-training

Goal

The tokenizer used for prelude (and flagship?) does not include <think> </think>, et.c.
The goal of this task is to convert the tokenizer used for prelude (and flagship) to support whatever
special tokens that is used in the template that we will use during post-training (Qwen3).

Deliverable scope
A post-training adapted tokenizer with special tokens include.d.

Dependencies
None

Lenguaje dominante
Sin datos de lenguaje
Estrellas
3
Forks
0
Sin PR fusionados en 30 d

Preparar el entorno

Este proyecto no incluye contenedor de desarrollo, Dockerfile ni guía de contribución, así que la configuración corre por tu cuenta: empieza por su README y consulta nuestra guía para la primera contribución para los pasos generales.

Primeros pasos

  1. Lee el issue completo y luego la guía de contribución del proyecto.
  2. Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
  3. Haz un fork del repositorio y trabaja en una rama.
  4. Abre un pull request que haga referencia al número del issue.

Más de OpenEuroLLM/Taskboard

Todos los issues de OpenEuroLLM/Taskboard

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.