apache/beam

Cannot write "google.protobuf.Timestamp" (NanosInstant) to BigQuery through schemas

Open

#20.523 geöffnet am 4. Juni 2022

Auf GitHub ansehen
 (1 Kommentar) (0 Reaktionen) (0 zugewiesene Personen)Java (4.097 Forks)batch import
P3gcpgood first issueimprovementiojava

Repository-Metriken

Stars
 (7.313 Stars)
PR-Merge-Metriken
 (Durchschn. Merge 6T) (243 gemergte PRs in 30 T)

Beschreibung

See here for details and instructions for reproducing.

https://lists.apache.org/thread.html/r1657ccf41dda3f2d9d082c5ebb006dd2da92863983971ad23485f16e%40%3Cdev.beam.apache.org%3E

Imported from Jira BEAM-10655. Original Jira may contain additional context. Reported by: chamikara.

Contributor Guide

Research-Richtung
Untersuchen Sie den BigQuery IO Connector in Apache Beam, insbesondere den Typzuordnungscode in Dateien unter sdks/java/io/google cloud platform/src/main/java/org/apache/beam/sdk/io/gcp/bigquery/. Verstehen Sie, wie andere Typen in BigQuery Schema konvertiert werden. Das Problem betrifft die Unfähigkeit, google.protobuf.Timestamp (NanosInstant) Felder zu schreiben. Sehen Sie sich das referenzierte Jira Issue und den Mailinglisten Thread für Reproduktionsschritte und den potenziellen Ort der Korrektur an. Erwägen Sie, eine benutzerdefinierte Typzuordnung hinzuzufügen oder die vorhandene Protobuf Unterstützung in Beam zu nutzen.
Tech Stack
java
Domain
backenddata
Issue Type
Fehler
SchwierigkeitGeschätzte Implementierungsschwierigkeit für neue Contributors, von 1 für sehr kleine Änderungen bis 5 für Expertenarbeit.
3
Geschätzte ZeitEin grober Zeitrahmen, um zu recherchieren, zu implementieren, zu testen und einen Pull Request vorzubereiten.
Halber Tag
AktivitätsstatusWie verfügbar das Issue gerade wirkt: frisch, aktiv, stale, blockiert oder wartet auf Maintainer-Input.
Aktiv
KlarheitWie klar das Issue die erwartete Änderung, Akzeptanzkriterien und den nächsten Schritt erklärt.
Recherche nötig
Voraussetzungen
JavaProtocol BuffersBigQuery
EinsteigerfreundlichkeitEin Score von 1 bis 100, der schätzt, wie zugänglich dieses Issue für First-Time Contributors ist.
50