[Doc] CAST has no explicit TimeType branch (Spark 4.1)
Los mantenedores suelen responder en 1 día
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 2/5
- Tiempo estimado
- 1-3 horas
- Aptitud para principiantes
- 72/100
- Tipo de issue
- Documentación
- Claridad
- Bastante claro
- Estado de actividad
- Tranquilo
- Stack tecnológico
- scala
- Área
- documentation
Línea de trabajo
Comienza en CometCast.scala y compara su gestión de casts con Cast.scala del código fuente de Spark 4.1.1 referenciado. Sigue cómo los motivos de incompatibilidad alimentan la guía de compatibilidad generada automáticamente y, después, verifica que la guía informe explícitamente de que los casts que implican TimeType no son compatibles, sin cambiar el comportamiento nativo de los casts.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
Describe the bug
Spark 4.1 introduced TimeType (HH:mm:ss). Spark 4.1's Cast.scala adds many TimeType arms (StringType <-> TimeType, TimeType <-> TimeType, TimeType -> IntegralType / DecimalType, etc.). CometCast.isSupported has no TimeType arm at all, so every TimeType-involving cast falls into the default case _ => unsupported(fromType, toType) and falls back to Spark.
The fallback is correct, but it is implicit, and getUnsupportedReasons() on CometCast does not enumerate TimeType as one of the unsupported branches, so the auto-generated compatibility guide doesn't mention it.
Surfaced by the cast audit (collection PR queue).
Expected behavior
Either:
- Add an explicit
TimeTypearm toCometCast.isSupportedthat returnsUnsupported(Some("Cast to/from TimeType is not yet supported")), OR - Implement native
TimeTypecast (depends onTimeTypebeing supported broadly across Comet, tracked by the broader date/time epic #4418).
The minimum here is the explicit Unsupported arm so the compatibility guide reflects it.
Additional context
- Spark reference:
Cast.scalain/tmp/spark-v4.1.1/sql/catalyst/src/main/scala/org/apache/spark/sql/catalyst/expressions/. - Comet matrix:
CometCast.scala. - Related: #4418 (EPIC for date/time expressions on Spark 4.x).
- Lenguaje dominante
- Scala
- Estrellas
- 1.3k
- Forks
- 377
- Merge medio
- 2 d 8 h
- PR fusionados (30 d)
- 309
Preparar el entorno
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de apache/datafusion-comet
-
bug performance priority:medium regression
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
apache/datafusion-comet#6313 ·
Los mantenedores suelen responder en 1 día
-
arrays_zip with two same-named inputs fails with "ArrowArray struct has 2 children (expected 1)"Posiblemente ocupada @mohitgurav20 la tomó hace 1 día. Abiertoarea:expressions area:ffi bug priority:high
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
apache/datafusion-comet#6251 · 4 comentarios · 1 asignado ·
Los mantenedores suelen responder en 1 día
-
area:ci bug priority:low
Dificultad 2/5 1-3 horas Aptitud para principiantes 84/100
apache/datafusion-comet#6060 ·
Los mantenedores suelen responder en 1 día
-
requires-triage
Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100
apache/datafusion-comet#5661 ·
Los mantenedores suelen responder en 1 día
-
area:scan enhancement
Dificultad 2/5 1-3 horas Aptitud para principiantes 86/100
apache/datafusion-comet#5319 ·
Los mantenedores suelen responder en 1 día
Todos los issues de apache/datafusion-comet
Issues similares
-
ML Scorer validation passes identical non-numeric column types that scikit-learn cannot scoreAbierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 86/100
apache/texera#8756 · 4 comentarios ·
Los mantenedores suelen responder en 1 día
-
Setup dependabotAbierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 74/100
software-mansion/starknet-jvm#631 ·
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 72/100
lichess-org/lila#21861 ·
Los mantenedores suelen responder en 1 día
-
bug
Dificultad 1/5 Menos de una hora Aptitud para principiantes 88/100
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 70/100
com-lihaoyi/mill#7624 ·
Los mantenedores suelen responder en 1 día