feat(tf2): support epoch-based and multi-task training horizons
Los mantenedores suelen responder en 4 días
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 5/5
- Tiempo estimado
- Más de una semana
- Aptitud para principiantes
- 35/100
- Tipo de issue
- Nueva funcionalidad
- Claridad
- Bastante claro
- Estado de actividad
- Tranquilo
- Stack tecnológico
- python, tensorflow
- Área
- machine-learning
Línea de trabajo
Empieza rastreando la inicialización del entrenamiento de TF2 desde training.numb_steps, pasando por el filtrado del dataset y la resolución del tamaño de batch, y compara la semántica del esquema referenciada en #5757. Mapea dónde se gestionan las transiciones de época, el muestreo multi-task, el remezclado, el estado de reinicio y los recuentos de pasos del optimizador distribuido. Se considera terminado cuando las entradas de epoch-only y multi-task funcionan con un comportamiento de reinicio y remezclado probado, mientras que el entrenamiento con pasos fijos permanece sin cambios.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
Summary
The common schema accepts training.numb_epoch and aliases plus multi-task training.num_epoch_dict, but TF2 training still initializes directly from training.numb_steps. Epoch-only inputs therefore do not have a complete TF2 execution path.
Scope
- Resolve single-task epoch counts after dataset and batch-size setup determines steps per epoch.
- Resolve multi-task epoch dictionaries into documented sampling probabilities and a deterministic total step count.
- Define epoch transitions, reshuffling, and restart state.
- Keep distributed ranks aligned on optimizer-step count.
- Preserve explicit fixed-step behavior.
Use a shared backend-neutral horizon resolver where feasible so schema semantics remain consistent.
Acceptance criteria
- A normalized TF2 input with only an epoch count trains without requiring
numb_steps. - Multi-task epoch dictionaries produce documented and tested scheduling behavior.
- Filtering and batch-size resolution occur before horizon calculation.
- Restart resumes the same epoch and intra-epoch position.
- Single-rank and distributed tests cover reshuffling and uneven tails.
- Existing fixed-step TF2 training remains unchanged.
Refs #5757.
Coding agent: Codex
Codex version: codex-cli 0.144.4
Model: gpt-5.6-sol
Reasoning effort: xhigh
- Lenguaje dominante
- Python
- Estrellas
- 2.1k
- Forks
- 661
- Merge medio
- 5 d 13 h
- PR fusionados (30 d)
- 11
Preparar el entorno
Inicia el contenedor de desarrollo del proyecto en tu navegador, con tu propia cuenta de GitHub.
- Sin Dockerfile ni archivo de Docker Compose
- Sin plantilla de pull request
- Leer la guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de deepmodeling/deepmd-kit
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 73/100
deepmodeling/deepmd-kit#6086 ·
Los mantenedores suelen responder en 4 días
-
Fine-tune descriptor mismatch warning should ignore seedPosiblemente ocupada @SiyuanChenToDo la tomó hace 7 días. Abierto
Dificultad 1/5 Menos de una hora Aptitud para principiantes 88/100
deepmodeling/deepmd-kit#6038 · 2 comentarios ·
Los mantenedores suelen responder en 4 días
-
Docs enhancement
Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100
deepmodeling/deepmd-kit#5766 · 1 comentario ·
Los mantenedores suelen responder en 4 días
-
[Code scan] Freeze Paddle DPA3 parameters with stop_gradientPosiblemente ocupada @njzjz la tomó hace 104 días. Abiertobug
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
deepmodeling/deepmd-kit#5686 · 1 comentario ·
Los mantenedores suelen responder en 4 días
-
branch: master lang: py todo comment type: todo
Dificultad 2/5 1-3 horas Aptitud para principiantes 72/100
deepmodeling/deepmd-kit#5480 ·
Los mantenedores suelen responder en 4 días
Todos los issues de deepmodeling/deepmd-kit
Issues similares
-
[oblt-aw][autodoc] Update docs for security org scaffolding and Docs AI menu permission changesPosiblemente ocupada @github-actions la tomó hoy. Abierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100
Los mantenedores suelen responder en 1 día
-
external integration integration-submission
Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100
langchain-ai/docs#7077 ·
Los mantenedores suelen responder en 1 día
-
author-page correction
Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100
acl-org/acl-anthology#10623 · 1 comentario ·
Los mantenedores suelen responder en 1 día
-
Use context to recognize personal initials and lowercase namesPosiblemente ocupada @lipikaramaswamy la tomó hoy. Abiertobug
Dificultad 2/5 1-3 horas Aptitud para principiantes 67/100
NVIDIA-NeMo/Anonymizer#340 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 82/100
btclib-org/btclib-node#2083 ·
Los mantenedores suelen responder en 1 día