Snowflake CSV - use parallel scan settings for uncompressed CSV
まだ誰も着手していません。
評価
調査の方向性
Snowflake のデータ読み込みテストを見つけ、現在の入力処理を duckdb/benchmark.sh の 18 行目と比較してください。テストを更新して、MULTI_LINE=FALSE と COMPRESSION=NONE を使用して非圧縮 CSV を読み込むようにし、その設定でベンチマークが引き続き実行されることを確認してください。
索引モデルが issue の本文から書いたものです。
説明
I noticed that for duckdb the CSV file is first uncompressed before loading. https://github.com/ClickHouse/ClickBench/blob/main/duckdb/benchmark.sh#L18C1-L18C5
For Snowflake, we also support faster parallel scanning of uncompressed CSVs.
Can we modify the Snowflake data loading test such that it loads a uncompressed CSV with MULTI_LINE=FALSE and COMPRESSION=NONE?
- 主要言語
- Shell
- スター
- 1.1k
- フォーク
- 315
- 平均マージ
- 2時間 44分
- マージ済み PR（30日）
- 610
コントリビューションガイド
このリポジトリのコントリビューションガイドは索引されていません
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
ClickHouse/ClickBench のほかの issue
-
難易度 2/5 1〜3時間 初心者へのやさしさ 55/100
ClickHouse/ClickBench#2146 · コメント 1 件 ·
-
ClickBench+ オープン
難易度 5/5 1週間以上 初心者へのやさしさ 25/100
ClickHouse/ClickBench#1488 ·
-
close in a month if not active help wanted
難易度 3/5 1〜2日 初心者へのやさしさ 55/100
ClickHouse/ClickBench#1459 ·
-
close in a month if not active
難易度 3/5 1〜2日 初心者へのやさしさ 58/100
ClickHouse/ClickBench#1322 ·
-
Add Apache Kudu オープン
難易度 4/5 3〜5日 初心者へのやさしさ 25/100
ClickHouse/ClickBench#1090 ·
ClickHouse/ClickBench の issue をすべて見る
似ている issue
-
Bob Shell support オープンenhancement
難易度 2/5 1〜3時間 初心者へのやさしさ 65/100
-
tooling
難易度 2/5 1〜3時間 初心者へのやさしさ 75/100
-
難易度 2/5 1〜3時間 初心者へのやさしさ 70/100
openSUSE/python-rpm-macros#219 ·
-
難易度 2/5 1〜3時間 初心者へのやさしさ 70/100
YunoHost-Apps/adguardhome_ynh#258 ·
-
steam-short-session-tracker: incorrect registry backup path resets settings during automatic repair オープン
難易度 2/5 1〜3時間 初心者へのやさしさ 80/100
ValveSoftware/SteamOS#2829 ·