datalake_fdw: storage I/O over object storage (S3)

オープン

#2,009 2026年9月16日に作成コメント 0 件リアクション 0 件担当者 1 名 GitHub で見る

@MisterRaindrop がすでに取り組んでいます。

2026年9月16日から。

評価

この issue はまだ評価されていません。

datalake

Part of #2008. Letters (A, B0–B7, C, D, E) are the PRs listed there; this is A.

An S3 backend (AWS SDK for C++) in backend_registry, configured from the volume server and user-mapping options the validator already accepts (endpoint, region, path style, credentials, session token).
Arrow RandomAccessFile / OutputStream adapters over common/file_system_wrapper.h; parquet_read.cpp and parquet_write.cpp are the only format files that change.
The writer's rule carried over: an object is created once, never overwritten, and a failed writer removes exactly that object.
A storage_s3 smoke category against MinIO, and the CI job that starts MinIO (the CATEGORY_SERVICES hook in run_smoke_tests.sh).

HDFS (libhdfs3 is unmaintained; the wrapper leaves room for a second backend). Iceberg path layout (C).

Nothing. Starts first.

The #1951 type set round-trips through s3:// against MinIO in CI.
A write aborted after the first row group leaves no object; an existing key is refused.
Credentials never appear in logs, errors or EXPLAIN.
nm -D exports only the PostgreSQL entry points; Arrow 9 and 17 build.

[Bug] Expand fails to recognize user-defined tablespaces オープン

type: Bug

難易度 2/5 1〜3時間初心者へのやさしさ 76/100

apache/cloudberry#1885 · リアクション 2 件 · 2026年8月5日に作成
gpexpand first stage fails: 'SyncPackages' object has no attribute 'ret' (extension sync never runs; regression) オープン

難易度 2/5 1〜3時間初心者へのやさしさ 86/100

apache/cloudberry#1825 · 2026年6月18日に作成
[Bug] UPDATE of the distribution key fails with "can't split update for inherit table" after the child table is dropped オープン

type: Bug

難易度 3/5 1〜2日初心者へのやさしさ 65/100

apache/cloudberry#2048 · リアクション 1 件 · 2026年9月23日に作成
[Bug] Wrong results: GPORCA evaluates a window function in a correlated aggregate subquery over all groups オープン

type: Bug

難易度 4/5 3〜5日初心者へのやさしさ 40/100

apache/cloudberry#2047 · 2026年9月23日に作成
[Bug] Wrong results: GPORCA returns NULL instead of the empty-input value for correlated aggregate subqueries other than count オープン

type: Bug

難易度 4/5 3〜5日初心者へのやさしさ 45/100

apache/cloudberry#2046 · コメント 1 件 · 2026年9月23日に作成

plum build . without -o names the binary "." and fails to link オープン

bug

難易度 2/5 1〜3時間初心者へのやさしさ 75/100

bradcypert/plum#53 · 2026年9月24日に作成
[GLib] Rename run-end encoded array values accessor to physical_values オープン

Component: GLib

難易度 2/5 1〜3時間初心者へのやさしさ 70/100

apache/arrow#51479 · 2026年9月24日に作成
quiche HTTP/3 header filter only rejects CR/LF/NUL; other control bytes (e.g. ESC) still reach the header callback / terminal output オープン

難易度 2/5 1〜3時間初心者へのやさしさ 75/100

curl/curl#23070 · 2026年9月24日に作成
[esp32s31] uart_periph.c: UART3 TX/RX .signal = -1 breaks GPIO-matrix routing and causes OOB register write (IDFGH-18333) オープン

Status: Opened

難易度 2/5 1〜3時間初心者へのやさしさ 70/100

espressif/esp-idf#19127 · 2026年9月24日に作成
MOTD: a first-login task list for new users (/etc/motd, Darwin-style) オープン

難易度 2/5 1〜3時間初心者へのやさしさ 75/100

nextbsd/nextbsd-userland#285 · 2026年9月24日に作成