delta-io/delta

[Feature Request][Spark] Update UniForm related comment to include description to Hudi

Open

#3 252 ouverte le 11 juin 2024

Voir sur GitHub
 (3 commentaires) (0 réactions) (0 assignés)Scala (2 100 forks)batch import
enhancementgood first issue

Métriques du dépôt

Stars
 (8 807 stars)
Métriques de merge PR
 (Merge moyen 7j 1h) (142 PRs mergées en 30 j)

Description

Feature request

Which Delta project/connector is this regarding?

  • Spark
  • Standalone
  • Flink
  • Kernel
  • Other (fill in here)

Overview

UniForm now supports both Hudi and Iceberg. But the comment in UniversalFormat.scala is outdated, only mentioning support to Iceberg. These comment in UniversalFormat.scala should be updated to describe the UniForm support to Hudi.

Example comments from the file:

Currently, UniForm only supports Iceberg. When `delta.universalFormat.enabledFormats` contains"iceberg", we say that Universal Format (Iceberg) is enabled.

Link

Motivation

Further details

Willingness to contribute

The Delta Lake Community encourages new feature contributions. Would you or another member of your organization be willing to contribute an implementation of this feature?

  • Yes. I can contribute this feature independently.
  • Yes. I would be willing to contribute this feature with guidance from the Delta Lake community.
  • No. I cannot contribute this feature at this time.

Guide contributeur

Direction de recherche
Localisez le fichier `spark/src/main/scala/org/apache/spark/sql/delta/UniversalFormat.scala` et mettez à jour les commentaires qui ne mentionnent qu'Iceberg pour inclure également Hudi, reflétant la prise en charge actuelle du double format.
Stack technique
scala
Domaine
database
Type d'issue
Documentation
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
1
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
Moins d'une heure
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
ScalaGit
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
90