Analyse shouldn't repartition to a single partition by default
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 3/5
- Tiempo estimado
- 1-2 días
- Aptitud para principiantes
- 42/100
- Tipo de issue
- Error
- Claridad
- Bastante claro
- Estado de actividad
- Estancado
- Stack tecnológico
- python
- Área
- data-engineering
Línea de trabajo
Empieza rastreando el punto de entrada analyse y cómo invoca actualmente a repartition; luego reproduce el modo de fallo descrito en el issue de Dask enlazado con una consulta que no reduzca mucho. Se considera terminado cuando analyse ya no hace repartition a una sola partición por defecto, manteniendo su comportamiento de análisis previsto.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
analyse currently repartitions to a single partition, which will blow your computation up if you are running this on a query that isn't reducing very heavily, see
https://github.com/dask/dask/issues/11307
This shouldn't be the default behavior
cc @hendrikmakait
- Lenguaje dominante
- Python
- Estrellas
- 89
- Forks
- 26
- Métricas de merge de PR
- Sin PR fusionados en 30 d
Preparar el entorno
- Sin Dockerfile ni archivo de Docker Compose
- Sin plantilla de pull request
- Leer la guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de dask/dask-expr
-
Dificultad 4/5 3-5 días Aptitud para principiantes 38/100
-
Dificultad 3/5 1-2 días Aptitud para principiantes 45/100
-
Predicate pull-up optimizationAbierto
Dificultad 5/5 Más de una semana Aptitud para principiantes 30/100
-
Dificultad 4/5 3-5 días Aptitud para principiantes 30/100
-
Dificultad 3/5 1-2 días Aptitud para principiantes 25/100
Todos los issues de dask/dask-expr
Issues similares
-
bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 76/100
Graphify-Labs/graphify#4524 · 1 comentario ·
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
topoteretes/cognee#5982 ·
Los mantenedores suelen responder en 1 día
-
Patches of derivations with `__structuredAttrs` are ignoredPosiblemente ocupada @KiaraGrouwstra la tomó hoy. Abierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 81/100
nix-community/vulnix#184 ·
-
New InternshipAbiertonew_internship
Dificultad 1/5 Menos de una hora Aptitud para principiantes 65/100
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 64/100
aws-samples/sample-per-model-bedrock#295 ·
Los mantenedores suelen responder en 1 día