apache/datafusion-comet

Ver en GitHub

Apache DataFusion Comet Spark Accelerator

Estrellas: 1.3k
Forks: 377
Issues abiertos para principiantes: 13
Issues indexados: 608
Merge medio: 2 d 13 h
PR fusionados (30 d): 244

Lenguaje dominante: Scala
Licencia: Apache-2.0
Último push a GitHub: 19/9/2026
Última indexación: 14/9/2026
Guía de contribución: Guía de contribución
Código de conducta: Código de conducta
Etiquetas para principiantes: good first issue help wanted

Para principiantes Todo

Abierto Todos

575 issues abiertos indexados

native: `JVMClasses::with_env: JAVA_VM not initialized` aborts a multi-suite JVM Abierto

requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 45/100

apache/datafusion-comet#6096 · Abierto el 21/9/2026
Support Spark's `AtLeastNNonNulls` natively Abierto

enhancement requires-triage

Dificultad 3/5 1-2 días Aptitud para principiantes 65/100

apache/datafusion-comet#6093 · Abierto el 21/9/2026
Native executePlan busy-polls at 100% CPU while a plan with a JVM-fed input waits on native I/O Abierto

requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 68/100

apache/datafusion-comet#6091 · Abierto el 21/9/2026
Exempt testing-category and internal configs from the versioning policy Abierto

documentation requires-triage

Dificultad 3/5 1-2 días Aptitud para principiantes 74/100

apache/datafusion-comet#6088 · Abierto el 21/9/2026
Caching a relation over an Iceberg merge-on-read scan fails with ArrayIndexOutOfBoundsException Abierto

requires-triage

apache/datafusion-comet#6087 · 1 asignado · Abierto el 21/9/2026
array_append: ANSI item error is swallowed when the array is NULL Abierto

area:expressions bug requires-triage

Dificultad 3/5 1-2 días Aptitud para principiantes 68/100

apache/datafusion-comet#6086 · Abierto el 21/9/2026
Compose CometScanRule and CometExecRule into a single conversion rule Abierto

requires-triage

Dificultad 3/5 1-2 días Aptitud para principiantes 62/100

apache/datafusion-comet#6081 · Abierto el 21/9/2026
to_unix_timestamp and make_timestamp advertise an allowIncompatible native opt-in that does not exist Abierto

area:expressions bug priority:low requires-triage

Dificultad 3/5 1-2 días Aptitud para principiantes 84/100

apache/datafusion-comet#6080 · Abierto el 21/9/2026
ci: retry the Spark test pre-compile step when sbt fails to resolve dependencies Abierto

area:ci enhancement requires-triage

Dificultad 2/5 1-3 horas Aptitud para principiantes 84/100

apache/datafusion-comet#6078 · Abierto el 21/9/2026
Bug triage results: 2026-09-21 Abierto

requires-triage

Dificultad 3/5 1-2 días Aptitud para principiantes 25/100

apache/datafusion-comet#6077 · Abierto el 21/9/2026
Parquet writer tests can capture a previous write's plan Abierto

area:writer bug priority:low

apache/datafusion-comet#6075 · 1 comentario · 1 asignado · Abierto el 21/9/2026
Add native Vortex scan support Abierto

area:scan enhancement

Dificultad 5/5 Más de una semana Aptitud para principiantes 32/100

apache/datafusion-comet#6070 · Abierto el 21/9/2026
Remove memory accounting from Comet's on-heap mode Abierto

area:memory area:shuffle enhancement

apache/datafusion-comet#6063 · 1 asignado · Abierto el 20/9/2026
ci: a transient Maven Central failure in lint-java is reported as a scalafix violation Abierto

area:ci bug priority:low

Dificultad 2/5 1-3 horas Aptitud para principiantes 84/100

apache/datafusion-comet#6060 · Abierto el 20/9/2026
Native Iceberg scan: support abfs/abfss (Azure Data Lake Storage Gen2) locations Abierto

area:scan enhancement

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

apache/datafusion-comet#6058 · Abierto el 20/9/2026
Nightly CI failed on 2026-09-20 Abierto

ci-nightly-failure

Dificultad 4/5 3-5 días Aptitud para principiantes 35/100

apache/datafusion-comet#6057 · Abierto el 20/9/2026
Allow row-based build sides (such as JDBC) to convert to Arrow for native BroadcastHashJoin Abierto

enhancement

Dificultad 4/5 3-5 días Aptitud para principiantes 55/100

apache/datafusion-comet#6056 · Abierto el 19/9/2026
Consider accounting for Comet in spark.executor.memoryOverhead when off-heap memory is enabled Abierto

area:memory enhancement priority:medium user experience

apache/datafusion-comet#6050 · 2 comentarios · 1 asignado · Abierto el 19/9/2026
Variance and standard deviation return incorrect results for large nearby values Abierto

area:aggregation bug correctness priority:critical

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

apache/datafusion-comet#6044 · 1 asignado · Abierto el 19/9/2026
Sliding-window SUM(BIGINT) ignores ANSI and TRY overflow semantics Abierto

area:aggregation bug priority:critical

apache/datafusion-comet#6043 · 1 comentario · 1 asignado · Abierto el 19/9/2026
Audit Comet logical-link repair across AQE replanning Abierto

enhancement

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

apache/datafusion-comet#6034 · Abierto el 19/9/2026
Tuning guide does not explain that Comet's memory comes out of the executor container Abierto

documentation enhancement

Dificultad 3/5 1-2 días Aptitud para principiantes 76/100

apache/datafusion-comet#6032 · Abierto el 18/9/2026
Memory management cgroup diagram does not show which config value sizes each region Abierto

enhancement

Dificultad 2/5 1-3 horas Aptitud para principiantes 86/100

apache/datafusion-comet#6028 · Abierto el 18/9/2026
Native S3 scan on EKS/IRSA turns a transient STS throttle into a hard 403 storm Abierto

area:scan bug priority:medium

Dificultad 5/5 Más de una semana Aptitud para principiantes 42/100

apache/datafusion-comet#6024 · Abierto el 18/9/2026
Native Parquet S3 scan fails on credential provider classes that Spark/Hadoop accept Abierto

area:scan bug priority:medium

apache/datafusion-comet#6022 · 1 asignado · Abierto el 18/9/2026
Nested floating-point IN membership does not match Spark for signed zero Abierto

area:expressions bug priority:critical

apache/datafusion-comet#6019 · 1 comentario · 1 asignado · Abierto el 18/9/2026
Legacy mode negation of a scalar signed minimum errors where the array path wraps Abierto

area:expressions bug priority:medium

Dificultad 3/5 1-2 días Aptitud para principiantes 74/100

apache/datafusion-comet#6015 · Abierto el 18/9/2026
perf: broadcast hash join rebuilds the build-side hash table in every task Abierto

enhancement performance

apache/datafusion-comet#6013 · 2 comentarios · 1 asignado · Abierto el 18/9/2026
Evaluate rotating the native shuffle spill file at a byte threshold Abierto

area:shuffle enhancement

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

apache/datafusion-comet#6010 · Abierto el 18/9/2026
Free and account for spill range metadata in the native shuffle writer Abierto

area:shuffle enhancement

Dificultad 4/5 3-5 días Aptitud para principiantes 55/100

apache/datafusion-comet#6009 · Abierto el 18/9/2026
Text-format source on a broadcast build side blocks native `BroadcastHashJoin` Abierto

enhancement

apache/datafusion-comet#6008 · 1 reacción · 1 asignado · Abierto el 18/9/2026
Native Parquet write only supports `file:`/`hdfs:` outputs — falls back on `s3a://` Abierto

enhancement

apache/datafusion-comet#6007 · 1 comentario · 1 reacción · 2 asignados · Abierto el 17/9/2026
Track evaluation masks for data-dependent errors beyond unbase64 operator fallback Abierto

area:expressions enhancement

Dificultad 5/5 Más de una semana Aptitud para principiantes 28/100

apache/datafusion-comet#6006 · Abierto el 17/9/2026
SUM(decimal) returns NULL or throws under ANSI when an intermediate sum overflows the buffer precision but the final result fits Abierto

area:aggregation bug correctness priority:critical

Dificultad 4/5 3-5 días Aptitud para principiantes 52/100

apache/datafusion-comet#6002 · Abierto el 17/9/2026
Global aggregate with no grouping keys and no aggregate functions falls back to Spark ("No group by or aggregation") Abierto

area:aggregation enhancement

apache/datafusion-comet#6001 · 1 comentario · 1 asignado · Abierto el 17/9/2026
Nightly Miri workflow has failed every night since 2026-07-01 Abierto

area:ci bug priority:low

Dificultad 4/5 3-5 días Aptitud para principiantes 45/100

apache/datafusion-comet#5999 · 1 comentario · 1 asignado · Abierto el 17/9/2026
Improve memory accounting: bound the JVM Arrow allocator and make native reclaim work Abierto

enhancement

apache/datafusion-comet#5997 · 1 asignado · Abierto el 17/9/2026
TRY_CAST on narrowing map keys fails where Spark returns a map with a null key Abierto

area:expressions bug priority:high

apache/datafusion-comet#5995 · 1 comentario · 1 asignado · Abierto el 17/9/2026
Support Spark-compatible native hash and xxhash64 for decimals with precision >18 Abierto

area:expressions enhancement performance

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

apache/datafusion-comet#5994 · 1 comentario · 1 asignado · Abierto el 17/9/2026
Iceberg serde: residual reflection failures can silently drop residual filtering Abierto

area:scan bug priority:critical

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

apache/datafusion-comet#5992 · 1 comentario · Abierto el 16/9/2026
Nightly SNAPSHOT publishing is blocked until ASF Infra provisions Nexus credentials Abierto

area:ci enhancement

apache/datafusion-comet#5985 · 1 asignado · Abierto el 16/9/2026
[Variant] Preserve typed-value precedence without residual pre-rewriting Abierto

requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 28/100

apache/datafusion-comet#5980 · Abierto el 16/9/2026
[Variant] Remove the extra Spark byte-reconstruction pass Abierto

requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

apache/datafusion-comet#5978 · Abierto el 16/9/2026
[Variant] Replace missing-key metadata repair with native permissive reconstruction Abierto

requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

apache/datafusion-comet#5979 · Abierto el 16/9/2026
[Variant] Consolidate Spark-compatible missing-value validation and errors Abierto

requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

apache/datafusion-comet#5977 · Abierto el 16/9/2026
Audit remaining native Partial-to-Spark Final aggregate compatibility Abierto

enhancement requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 30/100

apache/datafusion-comet#5975 · Abierto el 16/9/2026
Columnar shuffle rejects range partitioning based on a native-serde check it never uses Abierto

requires-triage

Dificultad 3/5 1-2 días Aptitud para principiantes 72/100

apache/datafusion-comet#5971 · 1 comentario · Abierto el 15/9/2026
ci: cancel merge queue runs on the first job failure Abierto

area:ci enhancement requires-triage

Dificultad 4/5 3-5 días Aptitud para principiantes 58/100

apache/datafusion-comet#5969 · Abierto el 15/9/2026
test: cover Java float rendering through SQL file tests and consolidate the Iceberg partition path suites Abierto

enhancement requires-triage

apache/datafusion-comet#5968 · 1 asignado · Abierto el 15/9/2026
Forward Spark-generated runtime Bloom predicates into native Parquet readers Abierto

enhancement requires-triage

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

apache/datafusion-comet#5965 · 1 comentario · Abierto el 15/9/2026

apache/datafusion-comet

Recibe los nuevos issues en tu correo