Convert Spark Dataframe to Dataset with MapStruct
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 4/5
- Tiempo estimado
- 3-5 días
- Aptitud para principiantes
- 25/100
- Tipo de issue
- Nueva funcionalidad
- Claridad
- Bastante claro
- Estado de actividad
- Estancado
- Stack tecnológico
- java, spark
- Área
- data-engineering
Línea de trabajo
Comienza revisando el repositorio mapstruct-examples y la pregunta vinculada de Stack Overflow para comprender la conversión solicitada de Spark DataFrame a Dataset. Identifica dónde encajaría un ejemplo de Spark y Java y, a continuación, determina si MapStruct puede gestionar nombres de columnas de base de datos y tipos de campos de POJO diferentes. Se considerará completado cuando exista un ejemplo documentado y funcional que cubra esa conversión.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
When using Apache Spark with Java there is a pretty common use case of converting Spark's Dataframes to POJO-based Datasets. The thing is that many times your Dataframe is imported from a database in which the column namings and types are different from your POJO.
Example for this can be found on the following Stackoverflow question (which has been solved programmatically with a map and rename functions). I was wondering if that example could be solved with MapStruct (and maybe would be added to this examples repo).
- Lenguaje dominante
- Java
- Estrellas
- 1.4k
- Forks
- 504
- Métricas de merge de PR
- Sin PR fusionados en 30 d
Guía de contribución
No hay ninguna guía de contribución indexada para este repositorio
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de mapstruct/mapstruct-examples
-
Java 21 support Abierto
Dificultad 4/5 3-5 días Aptitud para principiantes 35/100
mapstruct/mapstruct-examples#153 · 1 comentario ·
-
Dificultad 4/5 3-5 días Aptitud para principiantes 25/100
mapstruct/mapstruct-examples#149 · 1 comentario ·
-
mapstruct-protobuf3 use lombok:UnsupportedOperationException(Collections$UnmodifiableCollection) Abierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 45/100
mapstruct/mapstruct-examples#142 ·
-
Dificultad 4/5 3-5 días Aptitud para principiantes 15/100
mapstruct/mapstruct-examples#138 ·
-
Dificultad 4/5 3-5 días Aptitud para principiantes 25/100
mapstruct/mapstruct-examples#127 ·
Todos los issues de mapstruct/mapstruct-examples
Issues similares
-
bug untriaged
Dificultad 2/5 1-3 horas Aptitud para principiantes 84/100
opensearch-project/ml-commons#5094 ·
-
bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 85/100
-
emitter:client:csharp feature
Dificultad 2/5 1-3 horas Aptitud para principiantes 72/100
-
affects/8.10 affects/8.9 component/clients kind/bug likelihood/mid severity/mid
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
-
Two open-case totals on one screen: the Programs tile says 15,858 and the nav badge says 15,868 Abiertobug frontend maui-pilot
Dificultad 2/5 1-3 horas Aptitud para principiantes 72/100