datalake_fdw: storage I/O over object storage (S3)
@MisterRaindrop đang làm issue này rồi.
Từ ngày 16/9/2026.
Đánh giá
Issue này chưa được đánh giá.
Mô tả
Part of #2008. Letters (A, B0–B7, C, D, E) are the PRs listed there; this is A.
Scope
- An S3 backend (AWS SDK for C++) in
backend_registry, configured from the volume server and user-mapping options the validator already accepts (endpoint, region, path style, credentials, session token). - Arrow
RandomAccessFile/OutputStreamadapters overcommon/file_system_wrapper.h;parquet_read.cppandparquet_write.cppare the only format files that change. - The writer's rule carried over: an object is created once, never overwritten, and a failed writer removes exactly that object.
- A
storage_s3smoke category against MinIO, and the CI job that starts MinIO (theCATEGORY_SERVICEShook inrun_smoke_tests.sh).
Out of scope
HDFS (libhdfs3 is unmaintained; the wrapper leaves room for a second backend). Iceberg path layout (C).
Depends on
Nothing. Starts first.
Acceptance
- The #1951 type set round-trips through
s3://against MinIO in CI. - A write aborted after the first row group leaves no object; an existing key is refused.
- Credentials never appear in logs, errors or
EXPLAIN. nm -Dexports only the PostgreSQL entry points; Arrow 9 and 17 build.
- Ngôn ngữ chính
- C
- Star
- 1.4k
- Fork
- 248
- Merge trung bình
- 4 ngày 10 giờ
- Pull request đã merge (30 ngày)
- 40
Hướng dẫn đóng góp
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của apache/cloudberry
-
type: Bug
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 76/100
apache/cloudberry#1885 · 2 reaction ·
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 86/100
apache/cloudberry#1825 ·
-
type: Bug
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 65/100
apache/cloudberry#2048 · 1 reaction ·
-
type: Bug
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 40/100
apache/cloudberry#2047 ·
-
type: Bug
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 45/100
apache/cloudberry#2046 · 1 bình luận ·
Tất cả issue của apache/cloudberry
Issue tương tự
-
task
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 70/100
vsanthanam/JBird#429 ·
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 70/100
-
bug documentation
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100
es-ude/OnDeviceTraining#459 ·
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 65/100
bilelmoussaoui/gobject-linter#199 · 1 bình luận ·
-
bug
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100
bradcypert/plum#53 ·