Convert Spark Dataframe to Dataset with MapStruct

オープン

#128 2021年11月5日に作成コメント 0 件リアクション 1 件担当者 0 名 GitHub で見る

まだ誰も着手していません。

評価

難易度: 4/5
見積もり時間: 3〜5日
初心者へのやさしさ: 25/100

issue の種類: 機能追加
明瞭さ: おおむね明確
活発さ: 停滞
技術スタック: java, spark
領域: data-engineering

調査の方向性

まず mapstruct-examples リポジトリとリンク先の Stack Overflow の質問を確認し、要求されている Spark DataFrame から Dataset への変換を理解します。Spark と Java の例をどこに追加するのが適切かを特定し、続いて MapStruct が異なるデータベース列名と POJO フィールド型を扱えるかどうかを判断します。この変換を対象とする、文書化された動作する例が完成すれば完了です。

索引モデルが issue の本文から書いたものです。

説明

When using Apache Spark with Java there is a pretty common use case of converting Spark's Dataframes to POJO-based Datasets. The thing is that many times your Dataframe is imported from a database in which the column namings and types are different from your POJO.

Example for this can be found on the following Stackoverflow question (which has been solved programmatically with a map and rename functions). I was wondering if that example could be solved with MapStruct (and maybe would be added to this examples repo).

主要言語: Java
スター: 1.4k
フォーク: 504
PR マージ指標: 30日以内にマージされた PR はありません

コントリビューションガイド

このリポジトリのコントリビューションガイドは索引されていません

はじめの一歩

issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
リポジトリをフォークし、ブランチを切って変更します。
issue 番号を参照したプルリクエストを送ります。

mapstruct/mapstruct-examples のほかの issue

Java 21 support オープン

難易度 4/5 3〜5日初心者へのやさしさ 35/100

mapstruct/mapstruct-examples#153 · コメント 1 件 · 2025年3月12日に作成
Exception running when i‘m delete unused interface オープン

難易度 4/5 3〜5日初心者へのやさしさ 25/100

mapstruct/mapstruct-examples#149 · コメント 1 件 · 2024年3月26日に作成
mapstruct-protobuf3 use lombok:UnsupportedOperationException(Collections$UnmodifiableCollection) オープン

難易度 2/5 1〜3時間初心者へのやさしさ 45/100

mapstruct/mapstruct-examples#142 · 2022年10月25日に作成
(Partent -> Child -> Child) not able to model with JpaContext オープン

難易度 4/5 3〜5日初心者へのやさしさ 15/100

mapstruct/mapstruct-examples#138 · 2022年6月30日に作成
Change Map to Bean mapping once a fix is done in core オープン

難易度 4/5 3〜5日初心者へのやさしさ 25/100

mapstruct/mapstruct-examples#127 · 2021年10月24日に作成

mapstruct/mapstruct-examples の issue をすべて見る

似ている issue

[BUG] Unified agent on Bedrock Converse with no tools is unusable: an empty `toolConfig` is emitted and Bedrock rejects the request オープン

bug untriaged

難易度 2/5 1〜3時間初心者へのやさしさ 84/100

opensearch-project/ml-commons#5094 · 2026年9月22日に作成
[Bug report] iceberg rest server load_table with refs fails precondition check "Cannot set metadata location with changes to table metadata: %s changes" for snapshots with statistics オープン

bug

難易度 2/5 1〜3時間初心者へのやさしさ 85/100

apache/gravitino#13452 · 2026年9月22日に作成
Support Test Project Creation for New Projects オープン

emitter:client:csharp feature

難易度 2/5 1〜3時間初心者へのやさしさ 72/100

microsoft/typespec#12027 · コメント 1 件 · リアクション 1 件 · 2026年9月22日に作成
Job worker stops polling silently when a poll throws an Error オープン

affects/8.10 affects/8.9 component/clients kind/bug likelihood/mid severity/mid

難易度 2/5 1〜3時間初心者へのやさしさ 78/100

camunda/camunda#63825 · 2026年9月22日に作成
Two open-case totals on one screen: the Programs tile says 15,858 and the nav badge says 15,868 オープン

bug frontend maui-pilot

難易度 2/5 1〜3時間初心者へのやさしさ 72/100

Taleef7/workwell#651 · コメント 1 件 · 2026年9月22日に作成

Java の issue をもっと見る