Hacktoberfest 2026: los issues que los mantenedores marcaron para octubre, abiertos y aptos para principiantes. Explorar issues de Hacktoberfest

Validation of timestamp with ISO8601 pattern with microseconds fails

Abierto
  • ¿Algo no está bien?
#68 1 comentario 0 reacciones 0 asignados Ver en GitHub

Nadie ha tomado este issue todavía.

Evaluación

Dificultad
3/5
Tiempo estimado
1-2 días
Aptitud para principiantes
48/100
Tipo de issue
Error
Claridad
Bastante claro
Estado de actividad
Estancado
Stack tecnológico
scala, spark
Área
data-engineering, testing

Línea de trabajo

Usa el reproductor en SchemaValidationSuite como primera comprobación y luego sigue SchemaValidator.validateSchema y su punto de entrada de validación del patrón de marca de tiempo. Compara los tres patrones y conserva la aceptación esperada de yyyy-MM-dd'T'HH:mm:ss.SSSXXX; listo cuando la prueba de regresión pase sin romper los otros dos casos.

Escrito por el modelo de indexación a partir del texto del issue.

Descripción

bug

Describe the bug

The following timestamp pattern fails to be validated: yyyy-MM-dd'T'HH:mm:ss.SSSXXX. This is a pattern defined by ISO8601. However, it does validate when removing either the 'T' or the fractional second part (see test-cases below)

To Reproduce

Steps to reproduce the behavior OR commands run:

  1. Add the following test to SchemaValidationSuite and execute it
  test("Timestamp with fractional seconds should be validated") {
    val schema = StructType(
      Array(
        StructField("id", LongType),
        StructField("name", StringType),
        StructField("timestamp_without_fraction_ok", TimestampType, nullable = false, Metadata.fromJson(""" { "pattern": "yyyy-MM-dd'T'HH:mm:ssXXX", "default": "2025-01-08T13:07:39+00:00" } """.stripMargin)),
        StructField("timestamp_with_fraction_without_T_ok", TimestampType, nullable = false, Metadata.fromJson(""" { "pattern": "yyyy-MM-dd HH:mm:ss.SSSXXX", "default": "2025-01-08 13:07:39.490+00:00" } """.stripMargin)),
        StructField("timestamp_with_fraction_and_T_nok", TimestampType, nullable = false, Metadata.fromJson(""" { "pattern": "yyyy-MM-dd'T'HH:mm:ss.SSSXXX", "default": "2025-01-08T13:07:39.490+00:00" } """.stripMargin))
      )
    )

    val failures = SchemaValidator.validateSchema(schema)(CommonTypeDefaults)
    if (failures.nonEmpty) {
      logger.error("Validation errors:")
      logger.error(failures.mkString("\n"))
    }

    assert(failures.isEmpty)
  }
  1. See the test failing with Unparseable date: "2025-01-08T13:07:39.490:00

Expected behavior

The pattern with 'T' and fractional seconds should be successfully validated.

Use-case

Only for internal development / testing

Lenguaje dominante
Scala
Estrellas
7
Forks
2
Merge medio
8 d 8 h
PR fusionados (30 d)
3

Preparar el entorno

  • Sin Dockerfile ni archivo de Docker Compose
  • Tiene una plantilla de pull request
  • Sin guía de contribución

Primeros pasos

  1. Lee el issue completo y luego la guía de contribución del proyecto.
  2. Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
  3. Haz un fork del repositorio y trabaja en una rama.
  4. Abre un pull request que haga referencia al número del issue.

Más de AbsaOSS/spark-data-standardization

Todos los issues de AbsaOSS/spark-data-standardization

Issues similares

Más issues de Scala

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.