S3 remote-signer Request header case duplicated

未关闭适合新手

#2,422 创建于 2025年9月3日 8 条评论 0 个 reaction 已指派 0 人在 GitHub 查看

还没有人认领这个 Issue。

评估

难度: 2/5
预计耗时: 1-3 小时
新手友好度: 68/100

Issue 类型: 缺陷
描述清晰度: 描述清楚
活跃度: 冷清
技术栈: aws, python
领域: cloud

调研方向

从 pyiceberg/io/fsspec.py 的第 106-121 行开始，跟踪 remote-signer 响应头如何被复制到请求中。验证此更改会保留返回值，同时不会创建重复的 X-Amz-Content-SHA256 响应头，然后使用相关测试验证生成的请求和签名行为。

由索引模型根据 Issue 内容生成。

描述

Apache Iceberg version

0.9.1 (latest release)

Please describe the bug 🐞

request header X-Amz-Content-SHA256 passed to the catalog service is STREAMING-UNSIGNED-PAYLOAD-TRAILER, and the header X-Amz-Content-SHA256 returned by the catalog service is UNSIGNED-PAYLOAD

but the code logic will add both headers to the request (two X-Amz-Content-SHA256 header).

At this time, there is a possibility that the signature will not be passed (because the file storage service get STREAMING-UNSIGNED-PAYLOAD-TRAILER header, bug signed with UNSIGNED-PAYLOAD)

https://github.com/apache/iceberg-python/blob/52d810efb62e39ec6d8d6a2f4cd2cad8165e2d2c/pyiceberg/io/fsspec.py#L106-L121

line120-121 change to this can can solve the problem

    headers = HTTPHeaders()
    for key, value in response_json["headers"].items():
        headers.add_header(key, ", ".join(value))

    request.headers = headers

Willingness to contribute

I can contribute a fix for this bug independently
I would be willing to contribute a fix for this bug with guidance from the Iceberg community
I cannot contribute a fix for this bug at this time

主要语言: Python
星标: 1.1k
派生: 589
平均合并: 2 天 2 小时
30 天内合并 PR: 70

贡献指南

这个仓库没有索引到贡献指南

从这里开始

先读完整个 Issue，再读项目的贡献指南。
在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
Fork 仓库，在一个分支上完成修改。
提交 Pull Request，并在描述里引用这个 Issue 编号。

apache/iceberg-python 的其他 Issue

Avro EnumReader.skip() does not advance the decoder 未关闭

kind:bug

难度 1/5 1 小时以内新手友好度 92/100

apache/iceberg-python#4006 · 2026年9月22日创建
to_bytes silently rescales a Decimal with a negative scale 未关闭

难度 2/5 1-3 小时新手友好度 78/100

apache/iceberg-python#3996 · 2026年9月18日创建
Deletion vector bitmap count is read from the blob and used as a loop bound without validation 未关闭

bug

难度 2/5 1-3 小时新手友好度 72/100

apache/iceberg-python#3979 · 2026年9月16日创建
FsspecFileIO: `_adls` mutates shared properties, so a second storage account gets the first account's filesystem 未关闭

难度 2/5 1-3 小时新手友好度 78/100

apache/iceberg-python#3885 · 2026年8月31日创建
[Bug] PyArrowFileIO fails to propagate s3.ssl.ca-cert to pyarrow.fs.S3FileSystem tls_ca_file_path 未关闭

难度 2/5 1-3 小时新手友好度 76/100

apache/iceberg-python#3866 · 1 条评论 · 2026年8月26日创建

查看 apache/iceberg-python 的全部 Issue

相似的 Issue

slack-gif-creator: validate_gif() multiplies the last frame's duration by the frame count, so reported duration/fps are wrong (1.0s GIF reported as 1.8s) 未关闭

难度 2/5 1-3 小时新手友好度 75/100

anthropics/skills#1811 · 1 条评论 · 2026年9月23日创建
App fails to start with gradio 6 (allowed by `gradio>=5.49.1`) 未关闭

难度 2/5 1-3 小时新手友好度 75/100

speaches-ai/speaches#678 · 2026年9月23日创建
ModuleNotFoundError: No module named 'mcp.server.fastmcp'. 未关闭

bug

难度 2/5 1-3 小时新手友好度 75/100

datalayer/mcp-compose#42 · 2026年9月23日创建
import spacy fails with ModuleNotFoundError: No module named 'click' 未关闭

难度 2/5 1-3 小时新手友好度 75/100

conda-forge/spacy-feedstock#177 · 2026年9月23日创建
humaneval: extract_function_body corrupts a fenced body-only reply, so the same correct code scores INCORRECT fenced and CORRECT unfenced 未关闭

难度 2/5 1-3 小时新手友好度 70/100

UKGovernmentBEIS/inspect_evals#2523 · 2026年9月23日创建

更多 Python Issue

精选适合新手参与的 GitHub issue 摘要。