Use rolling hash splitter (data sensitive, e.g. Buzhash or Rabin) by default instead of SizeSplitter (data insensitive)
还没有人认领这个 Issue。
评估
调研方向
首先追踪 SizeSplitter 在 boxo 中被选为默认值的位置,然后阅读链接的 go-ipfs-chunker issue 以及 Buzhash、Rabin、casync 和 desync 的参考资料。确定适用的 rolling-hash 方法和兼容性影响。完成的标准是默认使用具有抗移位能力的 rolling-hash splitter,而不是 SizeSplitter。
由索引模型根据 Issue 内容生成。
描述
Use the Buzhash or Rabin splitter in IPFS instead of the SizeSplitter by default.
A rolling hash based data sensitive splitter has a huge obvious advantage: it creates shift-resistant chunks and thus improves data deduplication and sharing.
For example casync is doing it too:
- http://0pointer.net/blog/casync-a-tool-for-distributing-file-system-images.html
- https://github.com/systemd/casync
- https://github.com/folbricht/desync (alternative Go implementation)
Original ticket: https://github.com/ipfs/go-ipfs-chunker/issues/13
- 主要语言
- Go
- 星标
- 326
- 派生
- 165
- PR 合并指标
- 30 天内没有已合并 PR
环境准备
- 没有 Dockerfile 或 Docker Compose 文件
- 有 Pull Request 模板
- 没有贡献指南
从这里开始
- 先读完整个 Issue,再读项目的贡献指南。
- 在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
- Fork 仓库,在一个分支上完成修改。
- 提交 Pull Request,并在描述里引用这个 Issue 编号。
ipfs/boxo 的其他 Issue
-
难度 2/5 1-3 小时 新手友好度 70/100
-
难度 4/5 3-5 天 新手友好度 46/100
-
难度 3/5 1-2 天 新手友好度 55/100
-
need/triage
难度 5/5 一周以上 新手友好度 38/100
-
dif/medium effort/hours kind/enhancement P3 topic/devexp
难度 5/5 一周以上 新手友好度 35/100
相似的 Issue
-
area/networking kind/bug
难度 2/5 1-3 小时 新手友好度 69/100
siderolabs/talos#14972 ·
维护者通常 1 天内回复
-
难度 1/5 1 小时以内 新手友好度 72/100
维护者通常 1 天内回复
-
kubectl wait outputs cryptic "error: unrecognized condition: []" when --for is omitted可能已有人在做 @muskan-creates352 今天认领。 未关闭kind/bug needs-triage
难度 2/5 1-3 小时 新手友好度 84/100
kubernetes/kubectl#1910 · 1 条评论 ·
-
needs-triage
难度 2/5 1-3 小时 新手友好度 66/100
stacklok/toolhive-catalog#1967 ·
维护者通常 1 天内回复
-
难度 2/5 1-3 小时 新手友好度 66/100
unbound-force/gaze#353 ·
维护者通常 1 天内回复