Call `get_row_group_column_bloom_filter` in parallel
I maintainer di solito rispondono entro 1 giorno
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 3/5
- Tempo stimato
- 1-2 giorni
- Idoneità per principianti
- 65/100
- Tipo di issue
- Refactoring
- Chiarezza
- Abbastanza chiara
- Stato di attività
- Attiva
- Stack tecnologico
- rust
- Ambito
- data-engineering, performance
Direzione di ricerca
Inizia individuando l’implementazione che chiama get_row_group_column_bloom_filter e leggi gli esempi correlati di Arrow e DataFusion collegati nell’issue. Aggiorna l’implementazione in modo che le chiamate al filtro Bloom vengano eseguite in parallelo, quindi esegui i test esistenti pertinenti e conferma che il comportamento rimanga corretto.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Whilst working on https://github.com/apache/iceberg-rust/pull/2398 we realized that calling get_row_group_column_bloom_filter in a loop isn't optimal.
DataFusion also does it the same way https://github.com/apache/datafusion/blob/55.0.0/datafusion/datasource-parquet/src/opener/mod.rs#L1266-L1292
https://github.com/apache/arrow-rs/pull/8462/changes has merged so we should follow up to improve this implementation.
- Lingua principale
- Rust
- Stelle
- 1.4k
- Fork
- 574
- Merge medio
- 1g 19h
- PR unite (30g)
- 66
Preparare l'ambiente
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di apache/iceberg-rust
-
datafusion
Difficoltà 2/5 1-3 ore Idoneità per principianti 76/100
apache/iceberg-rust#3297 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 82/100
apache/iceberg-rust#3285 · 1 reazione ·
I maintainer di solito rispondono entro 1 giorno
-
bug
Difficoltà 2/5 1-3 ore Idoneità per principianti 86/100
apache/iceberg-rust#3280 ·
I maintainer di solito rispondono entro 1 giorno
-
enhancement
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
apache/iceberg-rust#3234 · 2 reazioni ·
I maintainer di solito rispondono entro 1 giorno
-
bug
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
apache/iceberg-rust#3229 ·
I maintainer di solito rispondono entro 1 giorno
Tutte le issue di apache/iceberg-rust
Issue simili
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 88/100
aws-samples/sample-pacer#76 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 86/100
axodotdev/cargo-dist#2523 ·
I maintainer di solito rispondono entro 2 giorni