How to load a dataset from google cloud storage with tensorflow cloud?
@pavithrasv ya está trabajando en esto.
Desde el 20/8/2020.
Evaluación
Este issue todavía no se ha evaluado.
Descripción
Tensorflow cloud configuration:
GCP_BUCKET = "stereo-train"
tfc.run(
requirements_txt="requirements.txt",
chief_config=tfc.MachineConfig(
cpu_cores=8,
memory=30,
accelerator_type=tfc.AcceleratorType.NVIDIA_TESLA_T4,
accelerator_count=1,
),
docker_image_bucket_name=GCP_BUCKET,
)
And I have a bucket called gs://stereo-train that contains the dataset. The exact location of the dataset is:
gs://stereo-train/data_scene_flow/training/dat
However, when using this location like so:
tf.keras.preprocessing.image_dataset_from_directory("gs://stereo-train/data_scene_flow/training/dat", image_size=(375,1242),\
batch_size=6, shuffle=False, label_mode=None)
Behavior:
getting the error that "gs://stereo-train/data_scene_flow/training/dat" doesn't exist
Expected behavior:
tf.keras.preprocessing.image_dataset_from_directory should know that there's a gs bucket associated with the account and the dataset should be loaded.
- Lenguaje dominante
- Python
- Estrellas
- 379
- Forks
- 93
- Métricas de merge de PR
- Sin PR fusionados en 30 d
Preparar el entorno
- Sin Dockerfile ni archivo de Docker Compose
- Sin plantilla de pull request
- Leer la guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de tensorflow/cloud
-
Is this project deprecatedAbierto
Dificultad 5/5 Más de una semana Aptitud para principiantes 10/100
tensorflow/cloud#397 · 1 comentario · 1 reacción ·
-
Dificultad 4/5 3-5 días Aptitud para principiantes 30/100
tensorflow/cloud#392 · 3 comentarios ·
-
Dificultad 3/5 1-2 días Aptitud para principiantes 35/100
tensorflow/cloud#391 ·
-
Dificultad 5/5 Más de una semana Aptitud para principiantes 20/100
tensorflow/cloud#388 · 1 comentario ·
-
Dificultad 4/5 3-5 días Aptitud para principiantes 25/100
tensorflow/cloud#387 · 1 comentario ·
Todos los issues de tensorflow/cloud
Issues similares
-
area/install reliability
Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 83/100
FluidNumerics/fluid-walk-blocker#191 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 62/100
TransformerLensOrg/TransformerLens#1868 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 76/100
Los mantenedores suelen responder en 1 día
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 85/100
climate-analytics-lab/jax-gcm#1057 ·
Los mantenedores suelen responder en 1 día