apache/hudi

Add more tests to TestCOWDataSource for TimestampbasedKeyGen

Open

#14.753 geöffnet am 30. Nov. 2025

Auf GitHub ansehen
 (0 Kommentare) (0 Reaktionen) (0 zugewiesene Personen)Java (4.823 Stars) (2.431 Forks)batch import
area:testsfrom-jiragood first issuepriority:high

Beschreibung

[https://github.com/apache/hudi/pull/2431] adds support to leverage spark.sql partitionBy() clause to set Hudi's partition. So, some minimal tests are added to TestCOWDataSource for timestamp based key gen. But we would like to get more coverage wrt  timestamp based key gen

JIRA info

Contributor Guide

Tech Stack
java
Domain
testing
Issue Type
test
SchwierigkeitGeschätzte Implementierungsschwierigkeit für neue Contributors, von 1 für sehr kleine Änderungen bis 5 für Expertenarbeit.
3
Geschätzte ZeitEin grober Zeitrahmen, um zu recherchieren, zu implementieren, zu testen und einen Pull Request vorzubereiten.
1-3 hours
AktivitätsstatusWie verfügbar das Issue gerade wirkt: frisch, aktiv, stale, blockiert oder wartet auf Maintainer-Input.
fresh
KlarheitWie klar das Issue die erwartete Änderung, Akzeptanzkriterien und den nächsten Schritt erklärt.
clear
Voraussetzungen
JavaApache Hudi basicsSpark SQLTimestampbasedKeyGen
EinsteigerfreundlichkeitEin Score von 1 bis 100, der schätzt, wie zugänglich dieses Issue für First-Time Contributors ist.
50
Research-Richtung
Refer to the linked PR https://github.com/apache/hudi/pull/2431 for the initial implementation. Examine TestCOWDataSource in the source code (likely under hudi spark datasource/hudi spark/src/test/) to see existing tests for timestamp based key gen. Identify scenarios like different timestamp formats, edge cases, and partitionBy usage. Ensure tests cover both successful and error cases.