lance-format/lance

Add optimizer rule to change `LanceScanExec -> FilterExec` into `FilteredReadExec`

Open

#5154 aperta il 6 nov 2025

Vedi su GitHub
 (6 commenti) (0 reazioni) (1 assegnatario)Rust (695 fork)github user discovery
good first issueperformance

Metriche repository

Star
 (6582 star)
Metriche merge PR
 (Merge medio 6g 1h) (219 PR mergiate in 30 g)

Descrizione

There are query plans like this one that could benefit from pushing down the filter:

https://github.com/lancedb/lance/blob/35a0547426c47dd94425619c442dcd03ffd9860c/rust/lance/src/dataset/scanner.rs#L7157-L7158

Note: this will become obsolete if we change Scanner to construct a logical plan using the LanceTableProvider since pushdown can be handled at that layer. However, that's a ways off.

https://github.com/lancedb/lance/blob/35a0547426c47dd94425619c442dcd03ffd9860c/rust/lance/src/datafusion/dataframe.rs#L147-L158

Guida contributor

Direzione di ricerca
Esamina il codice di riferimento alle righe 7157-7158 di scanner.rs e alle righe 147-158 di dataframe.rs per comprendere il piano di esecuzione attuale. Studia il pattern delle regole dell'ottimizzatore di DataFusion per implementare una nuova regola che combini LanceScanExec e FilterExec in FilteredReadExec, effettuando il push down della condizione del filtro. Assicurati che la regola non si rompa quando non è presente alcun filtro.
Tech stack
rust
Dominio
backenddatabase
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
2
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Mezza giornata
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
RustGit
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
75