If Timestamp/Date pattern contains both literal or variable length entry and fractions of second placeholders it's likely to cause error
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 3/5
- Tempo stimato
- 1-2 giorni
- Idoneità per principianti
- 45/100
- Tipo di issue
- Bug
- Chiarezza
- Abbastanza chiara
- Stato di attività
- Ferma
- Stack tecnologico
- scala, spark
- Ambito
- data-engineering
Direzione di ricerca
Inizia riproducendo il fallimento con il pattern "'at' HH:mm:ss.SSS" tramite EnceladusDateTimeParser.format e il flusso Standardization. Traccia come le parti letterali o di lunghezza variabile del pattern influiscono sull’analisi delle posizioni delle frazioni di secondo; il lavoro è completato quando i pattern con un letterale prima di SSS vengono convertiti correttamente senza eccezioni.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
This issue is a shortcut for https://github.com/AbsaOSS/enceladus/issues/677 (moving it from Enceladus to here)
Describe the bug
If Timestamp/Date pattern contains both literal parts or variable length entry (month name, day name, ...) and fractions of second placeholders namely if any literal part is before any second fraction placeholder it will fail Standardization of such filed or even crash with an exception.
To Reproduce
Steps to reproduce the behavior OR commands run:
- Set the timestamp pattern to
"'at' HH:mm:ss.SSS" - Try to Standardize or just use 'EnceladusDateTimeParser.format'
- Exception, wouldn't it be
SSSbe at the tail it would "just" fail the conversion in Standardization
Expected behavior
This needs to work properly
Additional context
The reason is that the quote characters are counted in when the position of second fractions are analyzed. But in the actual string to convert they are not present making the index out of place, even outside the boundaries.
- Lingua principale
- Scala
- Stelle
- 7
- Fork
- 2
- Merge medio
- 8g 8h
- PR unite (30g)
- 3
Preparare l'ambiente
- Nessun Dockerfile né file Docker Compose
- Ha un modello di pull request
- Nessuna guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di AbsaOSS/spark-data-standardization
-
bug
Difficoltà 2/5 1-3 ore Idoneità per principianti 55/100
-
enhancement
Difficoltà 3/5 1-2 giorni Idoneità per principianti 45/100
-
bug
Difficoltà 3/5 1-2 giorni Idoneità per principianti 48/100
AbsaOSS/spark-data-standardization#68 · 1 commento ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100
-
Standardization can fail with `Task not serializable` when casting to date is requestedForse già presa @qwerty44-U l’ha presa 119 giorni fa. Apertabug
Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100
Tutte le issue di AbsaOSS/spark-data-standardization
Issue simili
-
Difficoltà 1/5 1-3 ore Idoneità per principianti 91/100
com-vitthalmirji/toon4s#117 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 74/100
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 82/100
zio/zio-blocks#1780 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
digital-asset/participant-query-store#168 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
propensive/soundness#2294 ·
I maintainer di solito rispondono entro 1 giorno