Propagate Java stack traces from JVM upcalls into DataFusionError

Đang mở

#55 mở ngày 17/5/2026 0 bình luận 0 reaction 0 người được giao Xem trên GitHub

Chưa có ai nhận issue này.

Đánh giá

Độ khó: 4/5
Thời gian dự kiến: 3-5 ngày
Mức phù hợp với người mới: 45/100

Loại issue: Tính năng
Độ rõ ràng: Khá rõ ràng
Mức độ hoạt động: Ít trao đổi
Công nghệ: java
Lĩnh vực: backend

Hướng nghiên cứu

Bắt đầu bằng cách lần theo các upcall được triển khai bằng Java qua org.apache.datafusion.internal.JniBridge, bắt đầu với các UDF vô hướng và việc xử lý DataFusionError::Execution. Xác định mọi đường đi từ JVM đến native có bắt một Throwable và cách cấu hình của SessionContext có thể tiếp cận chúng. Công việc được xem là hoàn tất khi mọi upcall hiện tại và trong tương lai đều sử dụng một thông báo có thể cấu hình, stack trace đầy đủ hoặc biểu diễn không có trace, với full là mặc định.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Mô tả

Follow-up from PR #46 review (thread).

Problem

When a Java-implemented upcall throws (currently: scalar UDFs via JniBridge, but the same will apply to any future upcall — table providers, aggregate UDFs, etc.), the native side surfaces only the exception class name and getMessage() via DataFusionError::Execution. The Java stack trace is discarded, which makes debugging much harder than necessary.

Proposal

Capture the throwable's stack trace on the JVM side and include it in the error string returned to native code. Make verbosity configurable per SessionContext so production callers can opt out — e.g. an enum like message | full | none, default full.

Scope

Should cover all JVM→native upcall paths, not just scalar UDFs. A shared helper in org.apache.datafusion.internal.JniBridge (or a new JniErrors utility) that converts a Throwable to the configured representation, used wherever upcalls catch exceptions.

References

pgwhalen's session-configurable approach in his community binding: https://github.com/pgwhalen/datafusion-java/blob/1c20733aa8b008315af6092a912b58ef3df6a482/datafusion-ffi-java/src/main/java/org/apache/arrow/datafusion/config/ConfigOptions.java#L50-L54

Ngôn ngữ chính: Java
Star: 32
Fork: 12
Chỉ số merge pull request: Không có pull request nào được merge trong 30 ngày

Hướng dẫn đóng góp

Mở hướng dẫn đóng góp

Bắt đầu từ đâu

Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
Fork repository và làm thay đổi trên một nhánh.
Mở pull request có tham chiếu số hiệu của issue.

Issue khác của apache/datafusion-java

Support pluggable AWS credentials for the S3 object store (credentials provider callback) Đang mở

Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100

apache/datafusion-java#116 · Mở ngày 26/8/2026
Spark DataSource backed by a DataFusion TableProvider over ADBC Đang mở

Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

apache/datafusion-java#112 · Mở ngày 30/6/2026
feat(dataframe): expose the executed physical plan with per-operator metrics Đang mở

enhancement

Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 42/100

apache/datafusion-java#96 · Mở ngày 26/5/2026
feat(table): expose `registerStreamingTable` for push-mode batch ingest Đang mở

enhancement

Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 38/100

apache/datafusion-java#95 · Mở ngày 26/5/2026
Create first release Đang mở

enhancement

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100

apache/datafusion-java#86 · 3 bình luận · Mở ngày 25/5/2026