How to iterate over a record batch?

未关闭

#468 创建于 2024年12月26日 4 条评论 0 个 reaction 已指派 0 人在 GitHub 查看

还没有人认领这个 Issue。

评估

难度: 3/5
预计耗时: 1-2 天
新手友好度: 25/100

Issue 类型: 文档
描述清晰度: 需要澄清
活跃度: 停滞
技术栈: java
领域: data

调研方向

先从 issue 中描述的 VectorSchemaRoot、getVector、getObject 和 contentToTSVString 用法开始，然后将其与其中链接的 Java 文档进行比较。确定文档所述的、使用具体 Java 类型读取每个向量的方法，并以新贡献者能够遍历一个 batch、无需通过逆向工程推断类型映射或重新解析字符串为工作完成的标准。

由索引模型根据 Issue 内容生成。

描述

Type: usage

Describe the usage question you have. Please include as many useful details as possible.

Now I have a VectorSchemaRoot. I can see to iterate over the batch with getVector and then getObject.

But the return value is of type Obejct. And I wonder how I can downcast it for some useful class I can retrieve the real value (string, int, float, etc.).

I know we have the field info of each vetcor, but I don't know the mapping between field type to real Java class. It looks over challenge to remember all the mapping by reverse engineering the code, and it may change as version evolves.

I checked https://arrow.apache.org/docs/java/index.html but all the pages tell about constructing a batch and how to move it from one place to another, rather than tell about how to read and dump a batch to a typed two-dimensional matrix.

The most trivial usage, contentToTSVString, call Object::toString on each cell. But I don't thing we should convert all the values to String and reparse it to concrete type.

主要语言: Java
星标: 95
派生: 154
平均合并: 2 天 10 小时
30 天内合并 PR: 11

贡献指南

打开贡献指南

从这里开始

先读完整个 Issue，再读项目的贡献指南。
在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
Fork 仓库，在一个分支上完成修改。
提交 Pull Request，并在描述里引用这个 Issue 编号。

apache/arrow-java 的其他 Issue

DictionaryEncoder.decode accepts out-of-range dictionary indices 未关闭

难度 2/5 1-3 小时新手友好度 74/100

apache/arrow-java#1261 · 2026年8月18日创建
ArrowFlightJdbcArray.getArray(index, count) can read past the end of the array slice 未关闭

难度 2/5 1-3 小时新手友好度 78/100

apache/arrow-java#1236 · 2026年7月20日创建
[Java][JDBC] ClobConsumer writes past VarCharVector data buffer for large CLOBs 未关闭

难度 2/5 1-3 小时新手友好度 78/100

apache/arrow-java#1230 · 2026年7月15日创建
Byte-array elements leak in `FromSchemaByteArray()` 未关闭

Type: bug

难度 2/5 1-3 小时新手友好度 85/100

apache/arrow-java#1205 · 2026年7月4日创建
[Java][IPC] AbstractCompressionCodec.compress() writes prefix=0 for empty buffers, incompatible with C++/Python readers 未关闭

Type: bug

难度 2/5 1-3 小时新手友好度 68/100

apache/arrow-java#1196 · 1 条评论 · 2026年6月29日创建

查看 apache/arrow-java 的全部 Issue

相似的 Issue

[BUG] Unified agent on Bedrock Converse with no tools is unusable: an empty `toolConfig` is emitted and Bedrock rejects the request 未关闭

bug untriaged

难度 2/5 1-3 小时新手友好度 84/100

opensearch-project/ml-commons#5094 · 2026年9月22日创建
[Bug report] iceberg rest server load_table with refs fails precondition check "Cannot set metadata location with changes to table metadata: %s changes" for snapshots with statistics 未关闭

bug

难度 2/5 1-3 小时新手友好度 85/100

apache/gravitino#13452 · 2026年9月22日创建
Support Test Project Creation for New Projects 未关闭

emitter:client:csharp feature

难度 2/5 1-3 小时新手友好度 72/100

microsoft/typespec#12027 · 1 条评论 · 1 个 reaction · 2026年9月22日创建
Job worker stops polling silently when a poll throws an Error 未关闭

affects/8.10 affects/8.9 component/clients kind/bug likelihood/mid severity/mid

难度 2/5 1-3 小时新手友好度 78/100

camunda/camunda#63825 · 2026年9月22日创建
Two open-case totals on one screen: the Programs tile says 15,858 and the nav badge says 15,868 未关闭

bug frontend maui-pilot

难度 2/5 1-3 小时新手友好度 72/100

Taleef7/workwell#651 · 1 条评论 · 2026年9月22日创建

更多 Java Issue