[Feature] Reimplement bitmap Global Index for compatibility with Paimon Java

Aperta

#316 aperta il 10/9/2026 0 commenti 0 reazioni 1 assegnatario Vedi su GitHub

@lxy-9602 ci sta già lavorando.

Dal 14/9/2026.

Valutazione

Questa issue non è ancora stata valutata.

Descrizione

enhancement

Search before asking

I searched in the issues and found nothing similar.

Motivation

The bitmap Global Index in Paimon Java has undergone a major redesign. The bitmap Global Index currently implemented in Paimon C++ follows the legacy design and file format, so it is no longer compatible with the current Java implementation.

As a result, Paimon C++ cannot reliably read bitmap Global Index files produced by current Paimon Java, and indexes written by the existing C++ implementation are not interoperable with the new Java implementation. The current Paimon C++ documentation therefore marks bitmap Global Index as unsupported.

Solution

Reimplement bitmap Global Index in Paimon C++ based on the current Paimon Java design and file format. The work should cover:

The current index reader, writer, and factory behavior.
Predicate evaluation and null/non-null bitmap semantics.
Compatibility tests using indexes produced by Paimon Java, together with C++ round-trip tests.
Cleanup or isolation of the legacy implementation after the new implementation is validated.

I plan to work on this reimplementation and submit a follow-up PR.

Anything else?

The redesigned Java implementation was introduced in apache/paimon#8276 and subsequently integrated with the sorted global-index build path in apache/paimon#8283.

Are you willing to submit a PR?

I am willing to submit a PR!

Lingua principale: C++
Stelle: 65
Fork: 29
Merge medio: 2g 4h
PR unite (30g): 78

Guida per i contributori

Apri la guida per i contributori

Come iniziare

Leggi tutta la issue e poi la guida ai contributi del progetto.
Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
Fai un fork del repository e lavora su un branch.
Apri una pull request che faccia riferimento al numero della issue.

Altre issue di apache/paimon-cpp

[Feature] dictionary encoded binary support Aperta

enhancement

apache/paimon-cpp#381 · 1 assegnatario · Aperta il 21/9/2026
[Feature] Bypass manifest lists on exact snapshot live-entry cache hits Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 30/100

apache/paimon-cpp#375 · 1 assegnatario · Aperta il 19/9/2026
[Feature] Support vector and full-text search in File Index Aperta

enhancement

Difficoltà 5/5 Più di una settimana Idoneità per principianti 45/100

apache/paimon-cpp#361 · 1 assegnatario · Aperta il 16/9/2026
[Feature] Support 64-bit deletion vectors in Paimon C++ Aperta

enhancement

Difficoltà 4/5 3-5 giorni Idoneità per principianti 45/100

apache/paimon-cpp#325 · 1 assegnatario · Aperta il 11/9/2026
[Feature] Support Vortex file format Aperta

enhancement

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

apache/paimon-cpp#319 · 1 reazione · 1 assegnatario · Aperta il 10/9/2026