apache/hudi

Add more tests to TestCOWDataSource for TimestampbasedKeyGen

Open

#14.753 aberto em 30 de nov. de 2025

Ver no GitHub
 (0 comments) (0 reactions) (0 assignees)Java (4.823 stars) (2.431 forks)batch import
area:testsfrom-jiragood first issuepriority:high

Description

[https://github.com/apache/hudi/pull/2431] adds support to leverage spark.sql partitionBy() clause to set Hudi's partition. So, some minimal tests are added to TestCOWDataSource for timestamp based key gen. But we would like to get more coverage wrt  timestamp based key gen

JIRA info

Guia do colaborador

Pilha de tecnologia
java
Domain
testing
Tipo Issue
test
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
3
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
1-3 hours
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
fresh
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
clear
Prerequisites
JavaApache Hudi basicsSpark SQLTimestampbasedKeyGen
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
50
Direção de pesquisa
Refer to the linked PR https://github.com/apache/hudi/pull/2431 for the initial implementation. Examine TestCOWDataSource in the source code (likely under hudi spark datasource/hudi spark/src/test/) to see existing tests for timestamp based key gen. Identify scenarios like different timestamp formats, edge cases, and partitionBy usage. Ensure tests cover both successful and error cases.