SQL file tests with a tolerance pass when only one side is NaN
Maintainer thường phản hồi trong vòng 2 ngày
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 2/5
- Thời gian dự kiến
- 1-3 giờ
- Mức phù hợp với người mới
- 78/100
Hướng nghiên cứu
Bắt đầu bằng cách đọc CometTestBase.scala và tìm checkSparkAnswerWithTolerance, hàm so sánh kết quả float và double cho các bài kiểm thử tệp SQL sử dụng query tolerance=.... Cập nhật phép so sánh NaN để các cặp chỉ khớp khi cả hai giá trị đều là NaN, hoặc khi cả hai đều là số nằm trong dung sai. Xác minh bằng một trường hợp hồi quy bao gồm NaN ở một phía và một trường hợp tương ứng có NaN ở cả hai phía.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
Describe the bug
checkSparkAnswerWithTolerance in CometTestBase.scala skips the comparison of a float or double pair whenever either side is NaN. It only compares values when !actual.isNaN && !expected.isNaN, so a NaN from Comet against a number from Spark, or the other way round, passes. A SQL file test with query tolerance=... uses this check, so it cannot catch a kernel that returns NaN where Spark does not.
Steps to reproduce
A query tolerance=1e-6 over ln(x) where Comet returns NaN on some rows and Spark returns a value passes. The plain query form of the same test fails with "Results do not match".
Expected behavior
The pair should match only when both sides are NaN, or both are numbers within the tolerance: if (actual.isNaN || expected.isNaN) assert(actual.isNaN && expected.isNaN).
Additional context
Found while reproducing the wrong ln results in #7671.
- Ngôn ngữ chính
- Scala
- Star
- 1.3k
- Fork
- 418
- Merge trung bình
- 3 ngày 18 giờ
- Pull request đã merge (30 ngày)
- 155
Chuẩn bị môi trường
- Không có Dockerfile hay tệp Docker Compose
- Có mẫu pull request
- Đọc hướng dẫn đóng góp
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của apache/datafusion-comet
-
area:expressions bug priority:high
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100
apache/datafusion-comet#7583 ·
Maintainer thường phản hồi trong vòng 2 ngày
-
bug priority:medium
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 73/100
apache/datafusion-comet#7559 · 2 bình luận ·
Maintainer thường phản hồi trong vòng 2 ngày
-
area:writer bug priority:low
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
apache/datafusion-comet#7558 ·
Maintainer thường phản hồi trong vòng 2 ngày
-
Comet Native Executors: run a query in Spark when Comet is turned offCó thể đã có người làm @andygrove đã nhận 11 ngày trước. Đang mởenhancement
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
apache/datafusion-comet#7557 ·
Maintainer thường phản hồi trong vòng 2 ngày
-
area:writer enhancement requires-triage
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 62/100
apache/datafusion-comet#7463 ·
Maintainer thường phản hồi trong vòng 2 ngày
Tất cả issue của apache/datafusion-comet
Issue tương tự
-
area:scripts priority:P2 status:backlog
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
KD5UJC-XYZ/scarab#1170 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 1/5 1-3 giờ Mức phù hợp với người mới 91/100
rchillyard/TableParser#132 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100
zio/zio-telemetry#1288 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
? - Needs Triage audit audit_4.3.0 audit_5.0.0
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 80/100
NVIDIA/cudf-spark#16965 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
valkey-io/valkey-glide#7745 ·
Maintainer thường phản hồi trong vòng 1 ngày