delta-io/delta

[Kernel] Validate readSchema is a subset of the table schema in ScanBuilder

Fermée

#2 149 ouverte le 6 oct. 2023

Voir sur GitHubGuide contributeur
 (6 commentaires) (0 réaction) (1 personne assignée)Scala (2 159 forks)batch import
enhancementgood first issuekernelstale

Métriques du dépôt

Stars
 (8 950 étoiles)
Métriques de merge PR
 (Métriques PR en attente)

Description

Feature request

Which Delta project/connector is this regarding?

  • Spark
  • Standalone
  • Flink
  • Kernel
  • Other (fill in here)

Overview

Validate that the read schema provided in ScanBuilder is a subset of the snapshot schema. https://github.com/delta-io/delta/blob/master/kernel/kernel-api/src/main/java/io/delta/kernel/internal/ScanBuilderImpl.java#L80

Motivation

Better validation / error messages.

Guide contributeur

Direction de recherche
Examinez ScanBuilderImpl.java pour comprendre comment readSchema est actuellement défini et validez le comme un sous ensemble du schema snapshot de la table à l'aide des utilitaires de schema existants.
Stack technique
java
Domaine
backenddatabase
Type d'issue
Fonctionnalité
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
3
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
Une demi journée
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
JavaDelta Kernel concepts
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
60