Issue in reproducibility
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 4/5
- Tiempo estimado
- 3-5 días
- Aptitud para principiantes
- 42/100
- Tipo de issue
- Error
- Claridad
- Necesita aclaración
- Estado de actividad
- Tranquilo
- Área
- machine-learning, testing-qa
Línea de trabajo
Clona la rama main de mateomorin/ttc-training, descomenta la última prueba en test_reproducibility y ejecuta uv run pytest con la configuración de seeding proporcionada. Compara los resultados de la prueba de reproducibilidad y las advertencias; debe considerarse terminado cuando la prueba ya no demuestre resultados diferentes después del entrenamiento con los datos sintéticos.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
I am unable to get the exact result after training a ttc model on my data (synthetic data), even after setting every possible seed:
torch.manual_seed(42)
random.seed(42)
np.random.seed(42)
torch.use_deterministic_algorithms(True)
if torch.cuda.is_available():
torch.cuda.manual_seed_all(42)
torch.backends.cudnn.deterministic = True
torch.backends.cudnn.benchmark = False
pytorch_lightning.seed_everything(42)
For full reproducibility:
git clone -b main https://github.com/mateomorin/ttc-training.git
# uncomment last test of test_reproducibility
# potentialy change your data path if you do not have access to bucket projet-ape
uv run pytest # should have 2 passed, 1 failed and potential warnings
- Lenguaje dominante
- Python
- Estrellas
- 23
- Forks
- 7
- Métricas de merge de PR
- Sin PR fusionados en 30 d
Preparar el entorno
Este proyecto no incluye contenedor de desarrollo, Dockerfile ni guía de contribución, así que la configuración corre por tu cuenta: empieza por su README y consulta nuestra guía para la primera contribución para los pasos generales.
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de InseeFrLab/torchTextClassifiers
-
GPU usage in docsAbierto
Dificultad 1/5 Menos de una hora Aptitud para principiantes 78/100
-
Failed to use the release V1.0.3Abierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 45/100
InseeFrLab/torchTextClassifiers#59 · 2 comentarios ·
-
enhancement
Dificultad 5/5 Más de una semana Aptitud para principiantes 30/100
-
Dependency DashboardAbierto
Dificultad 3/5 1-2 días Aptitud para principiantes 15/100
Todos los issues de InseeFrLab/torchTextClassifiers
Issues similares
-
good first issue hacktoberfest
Dificultad 1/5 Menos de una hora Aptitud para principiantes 92/100
RogueAlg0/taken#387 · 4 comentarios ·
Los mantenedores suelen responder en 1 día
-
tool-calling
Dificultad 2/5 1-3 horas Aptitud para principiantes 88/100
vllm-project/vllm#59838 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 92/100
raullenchai/Rapid-MLX#4042 ·
Los mantenedores suelen responder en 1 día
-
documentation
Dificultad 1/5 Menos de una hora Aptitud para principiantes 92/100
transitmatters/mbta-slow-zone-bot#70 ·
Los mantenedores suelen responder en 1 día
-
bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 66/100
open-webui/open-webui#31871 · 1 comentario ·
Los mantenedores suelen responder en 1 día