Determine timezone of JDBC connections automatically on incremental ingestion
I maintainer di solito rispondono entro 1 giorno
Una pull request collegata è già stata integrata.
- #823 di @yruslan — integrata
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 43/100
- Tipo di issue
- Funzionalità
- Chiarezza
- Abbastanza chiara
- Stato di attività
- Attiva
- Ambito
- data-engineering
Direzione di ricerca
Start by tracing incremental ingestion setup for datetime offset columns and the JDBC source configuration that reads server.timezone; inspect the connection and configuration entry points involved. Determine whether the JDBC connection can provide its timezone through an SQL statement, then compare the result with the configured timezone behavior. Done means incremental ingestion can determine and use the endpoint timezone automatically.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Background
When using incremental ingestion with 'datetime' columns it is important that the JDBC endpoint timezone is taken into account when setting up a datetime column as an offset column for incremental ingestion.
While it is possible to setup the timezone as part of Pramen JDBC source configuration (server.timezone), it would be great if this could be determined automatically using an SQL statement with the JDBC connection.
Feature
Determine timezone of JDBC connections automatically on incremental ingestion.
Example [Optional]
--
Proposed Solution [Optional]
--
- Lingua principale
- Scala
- Stelle
- 33
- Fork
- 5
- Merge medio
- 6h
- PR unite (30g)
- 15
Preparare l'ambiente
- Nessun Dockerfile né file Docker Compose
- Ha un modello di pull request
- Nessuna guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di AbsaOSS/pramen
-
bug
Difficoltà 4/5 3-5 giorni Idoneità per principianti 28/100
I maintainer di solito rispondono entro 1 giorno
-
Add a parallelism mode that allows parallel job runs but never the same job for different info datesApertaenhancement
Difficoltà 4/5 3-5 giorni Idoneità per principianti 45/100
I maintainer di solito rispondono entro 1 giorno
-
Jdbc Count doesn't use additional options from JDBC configForse già presa @qwerty44-U l’ha presa 119 giorni fa. Apertabug
Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100
I maintainer di solito rispondono entro 1 giorno
-
enhancement
Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100
I maintainer di solito rispondono entro 1 giorno
-
Add ability to track number of records deviation and report it as warnings in email notificationsApertaenhancement
Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100
I maintainer di solito rispondono entro 1 giorno
Tutte le issue di AbsaOSS/pramen
Issue simili
-
Difficoltà 1/5 1-3 ore Idoneità per principianti 91/100
com-vitthalmirji/toon4s#117 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 74/100
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
propensive/soundness#2294 ·
I maintainer di solito rispondono entro 1 giorno
-
area:scale audit priority:P2
Difficoltà 2/5 1-3 ore Idoneità per principianti 76/100
KD5UJC-XYZ/scarab#231 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 70/100
SpinalHDL/VexiiRiscv#198 ·
I maintainer di solito rispondono entro 3 giorni