apache/beam

Cannot write "google.protobuf.Timestamp" (NanosInstant) to BigQuery through schemas

Open

#20,523 opened on 2022年6月4日

GitHub で見る
 (1 comment) (0 reactions) (0 assignees)Java (4,097 forks)batch import
P3gcpgood first issueimprovementiojava

Repository metrics

Stars
 (7,313 stars)
PR merge metrics
 (平均マージ 6d) (30d で 243 merged PRs)

説明

See here for details and instructions for reproducing.

https://lists.apache.org/thread.html/r1657ccf41dda3f2d9d082c5ebb006dd2da92863983971ad23485f16e%40%3Cdev.beam.apache.org%3E

Imported from Jira BEAM-10655. Original Jira may contain additional context. Reported by: chamikara.

コントリビューターガイド

調査方針
Apache Beam の BigQuery IO コネクタを調査します。具体的には、sdks/java/io/google cloud platform/src/main/java/org/apache/beam/sdk/io/gcp/bigquery/ 配下のファイルにある型マッピングコードを理解してください。他の型がどのように BigQuery スキーマに変換されるかを把握します。この問題は、google.protobuf.Timestamp（NanosInstant）フィールドを書き込めないことに関するものです。再現手順と潜在的な修正箇所については、参照されている Jira issue とメーリングリストのスレッドを確認してください。カスタム型マッピングの追加、または Beam の既存の protobuf サポートの活用を検討してください。
技術スタック
java
領域
backenddata
Issue 種別
バグ
難度新しい貢献者にとっての実装難度です。1 は非常に小さな変更、5 は専門的な作業です。
3
推定時間経験ある貢献者が調査、実装、テスト、pull request 準備にかけるおおよその時間範囲です。
半日
活動状況Issue が今どれだけ取り組みやすいかを示します。新しい、活発、古い、ブロック中、またはメンテナー入力待ちなどです。
アクティブ
明確さ期待される変更、受け入れ条件、次の手順がどれだけ明確かを示します。
調査が必要
前提条件
JavaProtocol BuffersBigQuery
初心者向け度初回貢献者にどれだけ取り組みやすいかを 1-100 で推定したスコアです。
50