[Feature] Support Vortex file format

オープン

#319 2026年9月10日に作成コメント 0 件リアクション 1 件担当者 1 名 GitHub で見る

@zhouyc-ali がすでに取り組んでいます。

2026年9月21日から。

評価

難易度: 5/5
見積もり時間: 1週間以上
初心者へのやさしさ: 35/100

issue の種類: 機能追加
明瞭さ: おおむね明確
活発さ: 活発
技術スタック: cpp, java, rust
領域: data-engineering, databases

調査の方向性

まず paimon-vortex の Java リファレンスモジュールと、issue #238 の Mosaic Rust FFI パターンを読みます。C++ のファイル形式 SPI 要件を、要求されている schema、reader、writer、projection、predicate、row-selection の動作に対応付けます。C++ のラウンドトリップテストと Java で生成されたファイルの互換性テストで、サポート対象および非サポートの論理型がカバーされれば完了です。

索引モデルが issue の本文から書いたものです。

説明

enhancement

Search before asking

I searched in the issues and found nothing similar.

Motivation

Apache Paimon Java supports Vortex through the paimon-vortex module, a Rust-based columnar file format with extensible compression encodings and lazily loaded summary statistics. Paimon C++ cannot currently access tables using this format.

Solution

Add Vortex support to the Paimon C++ file-format SPI:

Register the vortex file-format factory.
Implement compatible schema, reader, and writer handling.
Support column projection, predicate pushdown, and precise row selection.
Validate the same supported and unsupported logical types as Java.
Add C++ round-trip tests and Java-produced file compatibility tests.

Anything else?

Vortex is implemented in Rust, so the integration can follow the Mosaic Rust FFI patterns (#238).
Java reference module: https://github.com/apache/paimon/tree/master/paimon-vortex

Are you willing to submit a PR?

I'm willing to submit a PR!

主要言語: C++
スター: 65
フォーク: 29
平均マージ: 2日 4時間
マージ済み PR（30日）: 78

コントリビューションガイド

コントリビューションガイドを開く

はじめの一歩

issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
リポジトリをフォークし、ブランチを切って変更します。
issue 番号を参照したプルリクエストを送ります。

apache/paimon-cpp のほかの issue

[Feature] dictionary encoded binary support オープン

enhancement

apache/paimon-cpp#381 · 担当者 1 名 · 2026年9月21日に作成
[Feature] Bypass manifest lists on exact snapshot live-entry cache hits オープン

難易度 4/5 3〜5日初心者へのやさしさ 30/100

apache/paimon-cpp#375 · 担当者 1 名 · 2026年9月19日に作成
[Feature] Support vector and full-text search in File Index オープン

enhancement

難易度 5/5 1週間以上初心者へのやさしさ 45/100

apache/paimon-cpp#361 · 担当者 1 名 · 2026年9月16日に作成
[Feature] Support 64-bit deletion vectors in Paimon C++ オープン

enhancement

難易度 4/5 3〜5日初心者へのやさしさ 45/100

apache/paimon-cpp#325 · 担当者 1 名 · 2026年9月11日に作成
[Feature] Reimplement bitmap Global Index for compatibility with Paimon Java オープン

enhancement

apache/paimon-cpp#316 · 担当者 1 名 · 2026年9月10日に作成

apache/paimon-cpp の issue をすべて見る

似ている issue

Mute ydb/tests/fq/streaming/test_udfs.py.TestUdfsUsage.test_dynamic_udf in main オープン

ai_reviewed

難易度 2/5 1〜3時間初心者へのやさしさ 68/100

ydb-platform/ydb#53869 · コメント 3 件 · 2026年9月23日に作成
[TC-MEDIAFILEMANAGEMENT-2.1] TH crashes while sending file data over BDX. オープン

bug cert blocker needs triage

難易度 2/5 1〜3時間初心者へのやさしさ 82/100

project-chip/connectedhomeip#74373 · 2026年9月23日に作成
[request] tracy/0.14.1 オープン

upstream update

難易度 2/5 1〜3時間初心者へのやさしさ 75/100

conan-io/conan-center-index#31035 · 2026年9月23日に作成
Liberty - Unlawful Orders - no transformation type for Javelineer オープン

Bug

難易度 2/5 1〜3時間初心者へのやさしさ 68/100

wesnoth/wesnoth#11592 · 2026年9月23日に作成
[Doc]: Feedback for `/en/latest/user_guide/support_matrix/supported_models.html` オープン

documentation

難易度 1/5 1時間未満初心者へのやさしさ 85/100

vllm-project/vllm-ascend#17329 · 2026年9月23日に作成

C++ の issue をもっと見る