`ProjectionExprs::project_statistics` computes approximate `Statistics::total_byte_size` ignoring column stats
维护者通常 1 天内回复
评估
调研方向
从 datafusion/physical-expr/src/projection.rs 中的 ProjectionExprs::project_statistics(约第 796 行)开始,然后阅读它如何计算 Statistics::total_byte_size,以及 ColumnStatistics::byte_size 如何表示精度。当计算使用可用的列字节大小统计信息(包括适当情况下的 Exact 或 Inexact 值)时,此问题即告完成。
由索引模型根据 Issue 内容生成。
描述
Describe the bug
On line https://github.com/apache/datafusion/blob/main/datafusion/physical-expr/src/projection.rs#L796 when computing Statistics::total_byte_size the stats in ColumnStatistics::byte_size are not queried.
To Reproduce
No response
Expected behavior
I would expect the sum of Precision::Exact (or even Inexact) to be used
Additional context
Statistics::total_byte_size is used in join planning
Willingness to contribute
I plan to contribute a fix for this bug independently
- 主要语言
- Rust
- 星标
- 9.6k
- 派生
- 2.6k
- 平均合并
- 3 天 19 小时
- 30 天内合并 PR
- 326
环境准备
在浏览器里用你自己的 GitHub 账号启动这个项目的开发容器。
- 没有 Dockerfile 或 Docker Compose 文件
- 有 Pull Request 模板
- 阅读贡献指南
从这里开始
- 先读完整个 Issue,再读项目的贡献指南。
- 在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
- Fork 仓库,在一个分支上完成修改。
- 提交 Pull Request,并在描述里引用这个 Issue 编号。
apache/datafusion 的其他 Issue
-
bug
难度 2/5 1-3 小时 新手友好度 76/100
apache/datafusion#27094 · 1 条评论 ·
维护者通常 1 天内回复
-
Substrait consumer doesn't recognise `shift_left` / `shift_right` from functions_arithmetic.yaml可能已有人在做 @jonasHanhan 于 1 天前认领。 未关闭bug
难度 2/5 1-3 小时 新手友好度 76/100
apache/datafusion#27059 ·
维护者通常 1 天内回复
-
physical-plan: decoding an Unnest or Explain node with an unset field panics可能已有人在做 @geoHeil 于 1 天前认领。 未关闭
难度 2/5 1-3 小时 新手友好度 75/100
apache/datafusion#26999 · 1 条评论 ·
维护者通常 1 天内回复
-
datafusion-proto: decoding an AvroScan node without the avro feature panics可能已有人在做 @geoHeil 于 1 天前认领。 未关闭
难度 1/5 1 小时以内 新手友好度 85/100
apache/datafusion#26998 ·
维护者通常 1 天内回复
-
`repeat` on `LargeUtf8` aborts the process on a result size no allocation can satisfy可能已有人在做 @huong8373tt-beep 于 3 天前认领。 未关闭bug good first issue
难度 2/5 1-3 小时 新手友好度 72/100
apache/datafusion#26948 · 1 条评论 · 已指派 1 人 ·
维护者通常 1 天内回复
查看 apache/datafusion 的全部 Issue
相似的 Issue
-
bug cluster redis-compat
难度 2/5 1-3 小时 新手友好度 78/100
维护者通常 1 天内回复
-
难度 2/5 1-3 小时 新手友好度 77/100
tangency-labs/solidcore#2839 ·
维护者通常 1 天内回复
-
bug priority: low ui
难度 2/5 1-3 小时 新手友好度 68/100
storytold/gridcraft#3446 · 1 条评论 ·
维护者通常 1 天内回复
-
难度 2/5 1-3 小时 新手友好度 88/100
维护者通常 1 天内回复
-
难度 2/5 1-3 小时 新手友好度 84/100
madeofpendletonwool/PinePods#1078 ·
维护者通常 1 天内回复