Attach runtime before calling scan for foreign table provider
还没有人认领这个 Issue。
评估
调研方向
从表提供程序的异步 scan 入口点以及 issue 中描述的 spawn_blocking 路径开始。重现一次 Lance 元数据缓存未命中,跟踪 runtime 相对于 scan 的附加时机,并确认缓存未命中路径能够在不出现 runtime 错误的情况下完成。
由索引模型根据 Issue 内容生成。
描述
Is your feature request related to a problem or challenge? Please describe what you are trying to do.
In the table provider for lance in the scan method I sometimes have to do a small amount of I/O to load dataset metadata if the metadata is not already in the cache. The scan method is async so I assume this is ok. However, I use spawn_blocking to trigger this I/O and it fails because the runtime is not active.
Describe the solution you'd like
The runtime should be attached before calling scan.
Describe alternatives you've considered
Currently I work around this by forcing the metadata to be cached before creating the table provider but this is inconvenient.
Additional context
Can provide additional details (stack traces, lance reproducers, etc.) on request.
- 主要语言
- Python
- 星标
- 605
- 派生
- 176
- 平均合并
- 1 天 23 小时
- 30 天内合并 PR
- 8
贡献指南
这个仓库没有索引到贡献指南
从这里开始
- 先读完整个 Issue,再读项目的贡献指南。
- 在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
- Fork 仓库,在一个分支上完成修改。
- 提交 Pull Request,并在描述里引用这个 Issue 编号。
apache/datafusion-python 的其他 Issue
-
enhancement
难度 2/5 1-3 小时 新手友好度 70/100
apache/datafusion-python#1757 ·
-
documentation
难度 2/5 1-3 小时 新手友好度 72/100
apache/datafusion-python#1726 ·
-
难度 2/5 半天 新手友好度 88/100
apache/datafusion-python#1691 ·
-
bug
难度 2/5 1-3 小时 新手友好度 78/100
apache/datafusion-python#1644 ·
-
enhancement
难度 5/5 一周以上 新手友好度 30/100
apache/datafusion-python#1737 ·
查看 apache/datafusion-python 的全部 Issue
相似的 Issue
-
enhancement
难度 2/5 1-3 小时 新手友好度 70/100
canonical/paas-charm#368 · 1 条评论 ·
-
难度 2/5 1-3 小时 新手友好度 75/100
-
tech debt
难度 2/5 1-3 小时 新手友好度 75/100
-
难度 1/5 1 小时以内 新手友好度 90/100
StevenBlack/hosts#3256 ·
-
难度 1/5 1 小时以内 新手友好度 90/100
qualcomm/qai-appbuilder#275 ·