apache/datafusion-comet

在 GitHub 查看

Apache DataFusion Comet Spark Accelerator

星标: 1.3k
派生: 377
开放的新手 issue: 13
已索引 issue: 608
平均合并: 2 天 13 小时
30 天内合并 PR: 244

主要语言: Scala
许可证: Apache-2.0
最近 GitHub push: 2026年9月19日
最近索引: 2026年9月14日
贡献指南: 贡献指南
行为准则: 行为准则
新手标签: good first issue help wanted

适合新手全部

未关闭全部

目前已索引 575 个未关闭的 Issue

native: `JVMClasses::with_env: JAVA_VM not initialized` aborts a multi-suite JVM 未关闭

requires-triage

难度 4/5 3-5 天新手友好度 45/100

apache/datafusion-comet#6096 · 2026年9月21日创建
Support Spark's `AtLeastNNonNulls` natively 未关闭

enhancement requires-triage

难度 3/5 1-2 天新手友好度 65/100

apache/datafusion-comet#6093 · 2026年9月21日创建
Native executePlan busy-polls at 100% CPU while a plan with a JVM-fed input waits on native I/O 未关闭

requires-triage

难度 4/5 3-5 天新手友好度 68/100

apache/datafusion-comet#6091 · 2026年9月21日创建
Exempt testing-category and internal configs from the versioning policy 未关闭

documentation requires-triage

难度 3/5 1-2 天新手友好度 74/100

apache/datafusion-comet#6088 · 2026年9月21日创建
Caching a relation over an Iceberg merge-on-read scan fails with ArrayIndexOutOfBoundsException 未关闭

requires-triage

apache/datafusion-comet#6087 · 已指派 1 人 · 2026年9月21日创建
array_append: ANSI item error is swallowed when the array is NULL 未关闭

area:expressions bug requires-triage

难度 3/5 1-2 天新手友好度 68/100

apache/datafusion-comet#6086 · 2026年9月21日创建
Compose CometScanRule and CometExecRule into a single conversion rule 未关闭

requires-triage

难度 3/5 1-2 天新手友好度 62/100

apache/datafusion-comet#6081 · 2026年9月21日创建
to_unix_timestamp and make_timestamp advertise an allowIncompatible native opt-in that does not exist 未关闭

area:expressions bug priority:low requires-triage

难度 3/5 1-2 天新手友好度 84/100

apache/datafusion-comet#6080 · 2026年9月21日创建
ci: retry the Spark test pre-compile step when sbt fails to resolve dependencies 未关闭

area:ci enhancement requires-triage

难度 2/5 1-3 小时新手友好度 84/100

apache/datafusion-comet#6078 · 2026年9月21日创建
Bug triage results: 2026-09-21 未关闭

requires-triage

难度 3/5 1-2 天新手友好度 25/100

apache/datafusion-comet#6077 · 2026年9月21日创建
Parquet writer tests can capture a previous write's plan 未关闭

area:writer bug priority:low

apache/datafusion-comet#6075 · 1 条评论 · 已指派 1 人 · 2026年9月21日创建
Add native Vortex scan support 未关闭

area:scan enhancement

难度 5/5 一周以上新手友好度 32/100

apache/datafusion-comet#6070 · 2026年9月21日创建
Remove memory accounting from Comet's on-heap mode 未关闭

area:memory area:shuffle enhancement

apache/datafusion-comet#6063 · 已指派 1 人 · 2026年9月20日创建
ci: a transient Maven Central failure in lint-java is reported as a scalafix violation 未关闭

area:ci bug priority:low

难度 2/5 1-3 小时新手友好度 84/100

apache/datafusion-comet#6060 · 2026年9月20日创建
Native Iceberg scan: support abfs/abfss (Azure Data Lake Storage Gen2) locations 未关闭

area:scan enhancement

难度 4/5 3-5 天新手友好度 48/100

apache/datafusion-comet#6058 · 2026年9月20日创建
Nightly CI failed on 2026-09-20 未关闭

ci-nightly-failure

难度 4/5 3-5 天新手友好度 35/100

apache/datafusion-comet#6057 · 2026年9月20日创建
Allow row-based build sides (such as JDBC) to convert to Arrow for native BroadcastHashJoin 未关闭

enhancement

难度 4/5 3-5 天新手友好度 55/100

apache/datafusion-comet#6056 · 2026年9月19日创建
Consider accounting for Comet in spark.executor.memoryOverhead when off-heap memory is enabled 未关闭

area:memory enhancement priority:medium user experience

apache/datafusion-comet#6050 · 2 条评论 · 已指派 1 人 · 2026年9月19日创建
Variance and standard deviation return incorrect results for large nearby values 未关闭

area:aggregation bug correctness priority:critical

难度 4/5 3-5 天新手友好度 48/100

apache/datafusion-comet#6044 · 已指派 1 人 · 2026年9月19日创建
Sliding-window SUM(BIGINT) ignores ANSI and TRY overflow semantics 未关闭

area:aggregation bug priority:critical

apache/datafusion-comet#6043 · 1 条评论 · 已指派 1 人 · 2026年9月19日创建
Audit Comet logical-link repair across AQE replanning 未关闭

enhancement

难度 5/5 一周以上新手友好度 35/100

apache/datafusion-comet#6034 · 2026年9月19日创建
Tuning guide does not explain that Comet's memory comes out of the executor container 未关闭

documentation enhancement

难度 3/5 1-2 天新手友好度 76/100

apache/datafusion-comet#6032 · 2026年9月18日创建
Memory management cgroup diagram does not show which config value sizes each region 未关闭

enhancement

难度 2/5 1-3 小时新手友好度 86/100

apache/datafusion-comet#6028 · 2026年9月18日创建
Native S3 scan on EKS/IRSA turns a transient STS throttle into a hard 403 storm 未关闭

area:scan bug priority:medium

难度 5/5 一周以上新手友好度 42/100

apache/datafusion-comet#6024 · 2026年9月18日创建
Native Parquet S3 scan fails on credential provider classes that Spark/Hadoop accept 未关闭

area:scan bug priority:medium

apache/datafusion-comet#6022 · 已指派 1 人 · 2026年9月18日创建
Nested floating-point IN membership does not match Spark for signed zero 未关闭

area:expressions bug priority:critical

apache/datafusion-comet#6019 · 1 条评论 · 已指派 1 人 · 2026年9月18日创建
Legacy mode negation of a scalar signed minimum errors where the array path wraps 未关闭

area:expressions bug priority:medium

难度 3/5 1-2 天新手友好度 74/100

apache/datafusion-comet#6015 · 2026年9月18日创建
perf: broadcast hash join rebuilds the build-side hash table in every task 未关闭

enhancement performance

apache/datafusion-comet#6013 · 2 条评论 · 已指派 1 人 · 2026年9月18日创建
Evaluate rotating the native shuffle spill file at a byte threshold 未关闭

area:shuffle enhancement

难度 5/5 一周以上新手友好度 35/100

apache/datafusion-comet#6010 · 2026年9月18日创建
Free and account for spill range metadata in the native shuffle writer 未关闭

area:shuffle enhancement

难度 4/5 3-5 天新手友好度 55/100

apache/datafusion-comet#6009 · 2026年9月18日创建
Text-format source on a broadcast build side blocks native `BroadcastHashJoin` 未关闭

enhancement

apache/datafusion-comet#6008 · 1 个 reaction · 已指派 1 人 · 2026年9月18日创建
Native Parquet write only supports `file:`/`hdfs:` outputs — falls back on `s3a://` 未关闭

enhancement

apache/datafusion-comet#6007 · 1 条评论 · 1 个 reaction · 已指派 2 人 · 2026年9月17日创建
Track evaluation masks for data-dependent errors beyond unbase64 operator fallback 未关闭

area:expressions enhancement

难度 5/5 一周以上新手友好度 28/100

apache/datafusion-comet#6006 · 2026年9月17日创建
SUM(decimal) returns NULL or throws under ANSI when an intermediate sum overflows the buffer precision but the final result fits 未关闭

area:aggregation bug correctness priority:critical

难度 4/5 3-5 天新手友好度 52/100

apache/datafusion-comet#6002 · 2026年9月17日创建
Global aggregate with no grouping keys and no aggregate functions falls back to Spark ("No group by or aggregation") 未关闭

area:aggregation enhancement

apache/datafusion-comet#6001 · 1 条评论 · 已指派 1 人 · 2026年9月17日创建
Nightly Miri workflow has failed every night since 2026-07-01 未关闭

area:ci bug priority:low

难度 4/5 3-5 天新手友好度 45/100

apache/datafusion-comet#5999 · 1 条评论 · 已指派 1 人 · 2026年9月17日创建
Improve memory accounting: bound the JVM Arrow allocator and make native reclaim work 未关闭

enhancement

apache/datafusion-comet#5997 · 已指派 1 人 · 2026年9月17日创建
TRY_CAST on narrowing map keys fails where Spark returns a map with a null key 未关闭

area:expressions bug priority:high

apache/datafusion-comet#5995 · 1 条评论 · 已指派 1 人 · 2026年9月17日创建
Support Spark-compatible native hash and xxhash64 for decimals with precision >18 未关闭

area:expressions enhancement performance

难度 5/5 一周以上新手友好度 35/100

apache/datafusion-comet#5994 · 1 条评论 · 已指派 1 人 · 2026年9月17日创建
Iceberg serde: residual reflection failures can silently drop residual filtering 未关闭

area:scan bug priority:critical

难度 4/5 3-5 天新手友好度 48/100

apache/datafusion-comet#5992 · 1 条评论 · 2026年9月16日创建
Nightly SNAPSHOT publishing is blocked until ASF Infra provisions Nexus credentials 未关闭

area:ci enhancement

apache/datafusion-comet#5985 · 已指派 1 人 · 2026年9月16日创建
[Variant] Preserve typed-value precedence without residual pre-rewriting 未关闭

requires-triage

难度 5/5 一周以上新手友好度 28/100

apache/datafusion-comet#5980 · 2026年9月16日创建
[Variant] Remove the extra Spark byte-reconstruction pass 未关闭

requires-triage

难度 5/5 一周以上新手友好度 35/100

apache/datafusion-comet#5978 · 2026年9月16日创建
[Variant] Replace missing-key metadata repair with native permissive reconstruction 未关闭

requires-triage

难度 5/5 一周以上新手友好度 35/100

apache/datafusion-comet#5979 · 2026年9月16日创建
[Variant] Consolidate Spark-compatible missing-value validation and errors 未关闭

requires-triage

难度 5/5 一周以上新手友好度 35/100

apache/datafusion-comet#5977 · 2026年9月16日创建
Audit remaining native Partial-to-Spark Final aggregate compatibility 未关闭

enhancement requires-triage

难度 5/5 一周以上新手友好度 30/100

apache/datafusion-comet#5975 · 2026年9月16日创建
Columnar shuffle rejects range partitioning based on a native-serde check it never uses 未关闭

requires-triage

难度 3/5 1-2 天新手友好度 72/100

apache/datafusion-comet#5971 · 1 条评论 · 2026年9月15日创建
ci: cancel merge queue runs on the first job failure 未关闭

area:ci enhancement requires-triage

难度 4/5 3-5 天新手友好度 58/100

apache/datafusion-comet#5969 · 2026年9月15日创建
test: cover Java float rendering through SQL file tests and consolidate the Iceberg partition path suites 未关闭

enhancement requires-triage

apache/datafusion-comet#5968 · 已指派 1 人 · 2026年9月15日创建
Forward Spark-generated runtime Bloom predicates into native Parquet readers 未关闭

enhancement requires-triage

难度 5/5 一周以上新手友好度 35/100

apache/datafusion-comet#5965 · 1 条评论 · 2026年9月15日创建

apache/datafusion-comet

把新 issue 发到你的邮箱