Snowflake CSV - use parallel scan settings for uncompressed CSV

Aperta

#408 aperta il 17/6/2025 1 commento 0 reazioni 0 assegnatari Vedi su GitHub

Nessuno ha ancora preso questa issue.

Valutazione

Difficoltà: 3/5
Tempo stimato: 1-2 giorni
Idoneità per principianti: 35/100

Tipo di issue: Funzionalità
Chiarezza: Abbastanza chiara
Stato di attività: Ferma
Stack tecnologico: shell
Ambito: databases

Direzione di ricerca

Individua il test di caricamento dei dati Snowflake e confronta la gestione attuale dell'input con duckdb/benchmark.sh alla riga 18. Aggiorna il test in modo che carichi un CSV non compresso usando MULTI_LINE=FALSE e COMPRESSION=NONE, quindi verifica che il benchmark venga ancora eseguito con queste impostazioni.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Descrizione

I noticed that for duckdb the CSV file is first uncompressed before loading. https://github.com/ClickHouse/ClickBench/blob/main/duckdb/benchmark.sh#L18C1-L18C5

For Snowflake, we also support faster parallel scanning of uncompressed CSVs.

Can we modify the Snowflake data loading test such that it loads a uncompressed CSV with MULTI_LINE=FALSE and COMPRESSION=NONE?

https://medium.com/snowflake/recap-of-snowflake-ingestion-cost-and-performance-improvements-large-csv-demo-911e6588d626?source=friends_link&sk=38a754b71aa06f51f269c6974b24abd8

Lingua principale: Shell
Stelle: 1.1k
Fork: 315
Merge medio: 2h 44m
PR unite (30g): 610

Guida per i contributori

Nessuna guida per i contributori indicizzata per questo repository

Come iniziare

Leggi tutta la issue e poi la guida ai contributi del progetto.
Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
Fai un fork del repository e lavora su un branch.
Apri una pull request che faccia riferimento al numero della issue.

Altre issue di ClickHouse/ClickBench

Consider removing partitioned variants of Parquet, Data Lake, Vortex Aperta

Difficoltà 2/5 1-3 ore Idoneità per principianti 55/100

ClickHouse/ClickBench#2146 · 1 commento · Aperta il 21/9/2026
ClickBench+ Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

ClickHouse/ClickBench#1488 · Aperta il 19/8/2026
Refresh CHYT benchmark results Aperta

close in a month if not active help wanted

Difficoltà 3/5 1-2 giorni Idoneità per principianti 55/100

ClickHouse/ClickBench#1459 · Aperta il 18/8/2026
Versions benchmark: Run TPC-H and TPC-DS queries in standard-compatible mode Aperta

close in a month if not active

Difficoltà 3/5 1-2 giorni Idoneità per principianti 58/100

ClickHouse/ClickBench#1322 · Aperta il 11/8/2026
Add Apache Kudu Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

ClickHouse/ClickBench#1090 · Aperta il 25/7/2026

Tutte le issue di ClickHouse/ClickBench

Issue simili

Bob Shell support Aperta

enhancement

Difficoltà 2/5 1-3 ore Idoneità per principianti 65/100

rossoctl/cortex#1119 · Aperta il 24/9/2026
bench: run.sh's skip-update message always cites bench/skips.txt Aperta

tooling

Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100

svandragt/vivace#313 · Aperta il 24/9/2026
set CHECKED_HASH mode for compiled python assets Aperta

Difficoltà 2/5 1-3 ore Idoneità per principianti 70/100

openSUSE/python-rpm-macros#219 · Aperta il 24/9/2026
Problem with the get_network_interface function Aperta

Difficoltà 2/5 1-3 ore Idoneità per principianti 70/100

YunoHost-Apps/adguardhome_ynh#258 · Aperta il 24/9/2026
steam-short-session-tracker: incorrect registry backup path resets settings during automatic repair Aperta

Difficoltà 2/5 1-3 ore Idoneità per principianti 80/100

ValveSoftware/SteamOS#2829 · Aperta il 24/9/2026

Altre issue su Shell/Bash