Pytorch CUDA P100 GPU Incompatibility
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 4/5
- Tiempo estimado
- 3-5 días
- Aptitud para principiantes
- 42/100
- Tipo de issue
- Error
- Claridad
- Bastante claro
- Estado de actividad
- Tranquilo
- Stack tecnológico
- docker, python, pytorch
Línea de trabajo
Reproduce el bucle de entrenamiento en una Kaggle Tesla P100 e inspecciona las versiones de PyTorch y CUDA del entorno de Docker. Compara la configuración instalada con la capacidad sm_60 compatible y las indicaciones de PyTorch para CUDA 12.6; se considera terminado cuando la imagen admite un paso de entrenamiento forward exitoso en la P100 o documenta claramente la incompatibilidad y el entorno necesario.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
🐛 Bug
The model fails to train on GPU due to a CUDA capability mismatch. The installed version of PyTorch requires CUDA capability sm_70 or higher, but the available GPU (Tesla P100-PCIE-16GB) only supports sm_60. Here is traceback:
/usr/local/lib/python3.12/dist-packages/torch/cuda/__init__.py:435: UserWarning:
Found GPU0 Tesla P100-PCIE-16GB which is of cuda capability 6.0.
Minimum and Maximum cuda capability supported by this version of PyTorch is
(7.0) - (12.0)
queued_call()
/usr/local/lib/python3.12/dist-packages/torch/cuda/__init__.py:435: UserWarning:
Please install PyTorch with a following CUDA
configurations: 12.6 following instructions at
https://pytorch.org/get-started/locally/
queued_call()
/usr/local/lib/python3.12/dist-packages/torch/cuda/__init__.py:435: UserWarning:
Tesla P100-PCIE-16GB with CUDA capability sm_60 is not compatible with the current PyTorch installation.
The current PyTorch install supports CUDA capabilities sm_70 sm_75 sm_80 sm_86 sm_90 sm_100 sm_120.
If you want to use the Tesla P100-PCIE-16GB GPU with PyTorch, please check the instructions at https://pytorch.org/get-started/locally/
queued_call()
To Reproduce
Use P100 GPU on Kaggle, move Pytorch neural network model to GPU and start training loop.
Expected behavior
Successful forward training pass without errors.
Additional context
This was the error given:
AcceleratorError: CUDA error: no kernel image is available for execution on the device
Search for `cudaErrorNoKernelImageForDevice' in https://docs.nvidia.com/cuda/cuda-runtime-api/group__CUDART__TYPES.html for more information.
Code worked fine for me a few weeks ago, but I'm guessing a change in the Docker environment broke something.
- Lenguaje dominante
- Python
- Estrellas
- 2.7k
- Forks
- 1k
- Merge medio
- 5 h 55 min
- PR fusionados (30 d)
- 1
Guía de contribución
No hay ninguna guía de contribución indexada para este repositorio
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de Kaggle/docker-python
-
add python3.11-venv package Abiertoenhancement
Dificultad 2/5 1-3 horas Aptitud para principiantes 65/100
Kaggle/docker-python#1482 · 2 reacciones ·
-
ذ Abierto
Dificultad 5/5 Más de una semana Aptitud para principiantes 1/100
Kaggle/docker-python#1555 ·
-
Dificultad 4/5 3-5 días Aptitud para principiantes 25/100
Kaggle/docker-python#1515 ·
-
Additional ext4-backed mount point for high-throughput I/O caching (besides `/kaggle/working`) Abiertoenhancement
Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100
Kaggle/docker-python#1506 · 1 reacción ·
-
bug help wanted
Dificultad 4/5 3-5 días Aptitud para principiantes 35/100
Kaggle/docker-python#1504 ·
Todos los issues de Kaggle/docker-python
Issues similares
-
bug confirmed issue
Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100
open-webui/open-webui#30750 · 1 comentario ·
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100
-
enhancement
Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100
OpenwaterHealth/openmotion-bloodflow-app#604 · 1 comentario ·
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 70/100
-
good first issue
Dificultad 1/5 Menos de una hora Aptitud para principiantes 90/100