Is it possible to apply specific encodings on specific columns with ParquetWriter?
Les mainteneurs répondent en général sous 3 jours
Personne n'a encore pris cette issue.
Évaluation
- Difficulté
- 5/5
- Temps estimé
- Plus d'une semaine
- Accessibilité débutants
- 25/100
- Type d'issue
- Fonctionnalité
- Clarté
- À clarifier
- Activité
- À l'abandon
- Stack technique
- java
- Domaine
- data-engineering
Piste de recherche
Commencez par le point d’entrée ParquetWriter mentionné dans l’issue et examinez la façon dont les encodages de colonnes sont configurés. Comparez cela avec la définition de fichier basée sur JSON, puis déterminez s’il est possible de sélectionner des encodages différents pour chaque colonne ; le travail est terminé lorsqu’une réponse claire indique si cette possibilité est prise en charge ou non, et que la limitation ou la configuration pertinente est documentée.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Description
I’m working on a tool that generates Parquet files based on a file definition provided in JSON. I use the parquet-java library for this, and I’m curious if it’s possible to specify a particular type of encoding for specific columns when generating the file.
- Langage dominant
- Java
- Étoiles
- 3.1k
- Forks
- 1.6k
- Merge moyen
- 4 j 14 h
- PR mergées (30 j)
- 31
Préparer son environnement
- Aucun Dockerfile ni fichier Docker Compose
- Propose un modèle de pull request
- Aucun guide de contribution
Par où commencer
- Lisez l'issue en entier, puis le guide de contribution du projet.
- Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
- Forkez le dépôt et travaillez sur une branche.
- Ouvrez une pull request qui référence le numéro de l'issue.
Autres issues de apache/parquet-java
-
Binary statistics truncation test ignores its configured truncation lengthPeut-être pris @dhruv-15-03 l’a pris il y a 24 jours. Ouverte
Difficulté 2/5 1-3 heures Accessibilité débutants 88/100
apache/parquet-java#3820 ·
Les mainteneurs répondent en général sous 3 jours
-
Make PageReader AutoCloseableOuverte
Difficulté 2/5 1-3 heures Accessibilité débutants 82/100
apache/parquet-java#3767 ·
Les mainteneurs répondent en général sous 3 jours
-
Remove duplicate LICENSE and NOTICE files from benchmark JARsPeut-être pris @efegokdemir l’a pris il y a 27 jours. Ouverte
Difficulté 2/5 1-3 heures Accessibilité débutants 72/100
apache/parquet-java#3695 · 1 commentaire ·
Les mainteneurs répondent en général sous 3 jours
-
null_count is omitted for large columns in parquet filesPeut-être pris @efegokdemir l’a pris il y a 25 jours. OuverteType: bug
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
apache/parquet-java#3574 · 1 commentaire ·
Les mainteneurs répondent en général sous 3 jours
-
Improve `RunLengthBitPackingHybridDecoder.readNext` to avoid per-call buffer allocation and `DataInputStream` wrappingPeut-être pris @arouel l’a pris il y a 197 jours. OuverteType: enhancement
Difficulté 2/5 1-3 heures Accessibilité débutants 74/100
apache/parquet-java#3466 ·
Les mainteneurs répondent en général sous 3 jours
Toutes les issues de apache/parquet-java
Issues similaires
-
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
QuiltMC/update-quilt-meta#28 ·
-
awaiting triage Documentation P3
Difficulté 1/5 1-3 heures Accessibilité débutants 86/100
Les mainteneurs répondent en général sous 1 jour
-
area/build area/maintainability component/camunda-process-test kind/tech-debt
Difficulté 2/5 1-3 heures Accessibilité débutants 72/100
Les mainteneurs répondent en général sous 1 jour
-
Kafka: Filter empty strings and whitespace in IcebergSinkConfig stringToListPeut-être pris @mohamed-elbrik l’a pris aujourd’hui. Ouvertebug
Difficulté 2/5 1-3 heures Accessibilité débutants 68/100
Les mainteneurs répondent en général sous 1 jour
-
area/kotlin
Difficulté 2/5 1-3 heures Accessibilité débutants 84/100
Les mainteneurs répondent en général sous 1 jour