[client-v2] ClickHouseColumn mis-parses a Tuple whose JSON element is not last: later elements are swallowed as JSON parameters
I maintainer di solito rispondono entro 1 giorno
@polyglotAI-bot ci sta già lavorando.
Dal 25/9/2026.
Valutazione
- Difficoltà
- 2/5
- Tempo stimato
- 1-3 ore
- Idoneità per principianti
- 78/100
Direzione di ricerca
Inizia in ClickHouseColumn.readColumn, alle righe 508-516 della versione 0.9.5 o nel codice corrispondente della versione 0.10.0, e verifica come vengono rilevati i parametri JSON prima del ramo generico. Esegui nuovamente le riproduzioni fornite di ClickHouseColumn.of, in particolare Tuple(JSON, FixedString(3)) e Tuple(JSON, Decimal(10, 2)); il lavoro è completato quando gli elementi successivi della tupla rimangono separati e i parametri JSON adiacenti continuano a essere analizzati correttamente.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Summary
ClickHouseColumn.of(...) mis-parses a Tuple whose JSON element is not the last one: every element after the JSON up to the next closing parenthesis is swallowed as the JSON column's parameter list. Depending on what follows, the Tuple either silently loses elements or the parse throws Unknown data type.
Reproduced on clickhouse-data 0.9.5 and 0.10.0 (latest published), OpenJDK 17. No server needed.
Reproduce
import com.clickhouse.data.ClickHouseColumn;
ClickHouseColumn c = ClickHouseColumn.of("x", "Tuple(JSON, FixedString(3))");
c.getNestedColumns().size(); // 1 (expected 2)
c.getNestedColumns().get(0).getOriginalTypeName(); // "JSON, FixedString(3)"
ClickHouseColumn.of("x", "Tuple(JSON, Decimal(10, 2))");
// java.lang.IllegalArgumentException: Unknown data type: 2
Output of the snippet above (jshell, same on both versions):
Tuple(JSON, FixedString(3)) -> nested=1 first="JSON, FixedString(3)"
Tuple(JSON, Decimal(10, 2)) -> java.lang.IllegalArgumentException: Unknown data type: 2
Tuple(JSON, Int32) -> nested=2 (ok: nothing with parentheses after JSON)
Tuple(Int32, JSON) -> nested=2 (ok: JSON is last)
Tuple(FixedString(3), JSON) -> nested=2 (ok)
JSON(max_dynamic_paths=10) -> [max_dynamic_paths=10] (ok: the '(' is adjacent)
So the trigger is a non-final JSON element followed, anywhere later in the same Tuple, by a type that has parentheses.
Root cause
ClickHouseColumn.readColumn, 0.9.5 lines 508-516 (0.10.0: from line 553, unchanged):
} else if (args.startsWith(KEYWORD_JSON, i)) {
int index = args.indexOf('(', i + KEYWORD_JSON.length()); // scans to the END of the type string
if (index > i) {
i = ClickHouseUtils.skipBrackets(args, index, len, '(');
String originalTypeName = args.substring(startIndex, i);
...
parseJSONColumn(args.substring(index + 1, i - 1), nestedColumns, parameters);
indexOf('(') starts after the keyword but is not bounded to the next character, so inside a Tuple the ( of a later element is found. skipBrackets then consumes through that element's matching ), the span JSON, FixedString(3) becomes one JSON column, and 3 is fed to parseJSONColumn as its parameters. The enclosing Tuple parser resumes after the swallowed text, sees its own ), and ends with one element fewer.
- With
FixedString(3):parseJSONColumn("3")reads3as a path name, finds no type, and returns silently, so the Tuple is short with no error. - With
Decimal(10, 2):parseJSONColumn("10, 2")reads10as a path name and tries to parse2as its type:Unknown data type: 2.
Impact
Client.getTableSchema() fails for any table containing such a column (second case), or returns a Tuple with fewer nested columns than the type text declares (first case). A writer that serializes from the parsed columns but sends getOriginalTypeName() in a RowBinaryWithNamesAndTypes header then writes short rows against a header that promises more, which corrupts or fails the batch with no indication of the cause.
Suggested fix
Treat ( as the JSON parameter list only when it immediately follows the keyword, e.g. index == i + KEYWORD_JSON.length() (optionally after whitespace), matching the generic branch below it, which only calls readParameters when the current character is (.
- Lingua principale
- Java
- Stelle
- 1.6k
- Fork
- 638
- Merge medio
- 2g 14h
- PR unite (30g)
- 44
Preparare l'ambiente
- Nessun Dockerfile né file Docker Compose
- Ha un modello di pull request
- Leggi la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di ClickHouse/clickhouse-java
-
[examples] Remove old Spring exampleForse già presa @polyglotAI-bot l’ha presa 7 giorni fa. Aperta
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 85/100
ClickHouse/clickhouse-java#3111 · 1 commento · 1 assegnatario ·
I maintainer di solito rispondono entro 1 giorno
-
bug client-api-v2 test
Difficoltà 2/5 1-3 ore Idoneità per principianti 92/100
ClickHouse/clickhouse-java#3076 ·
I maintainer di solito rispondono entro 1 giorno
-
area:sql-parser bug client-v1
Difficoltà 1/5 1-3 ore Idoneità per principianti 92/100
ClickHouse/clickhouse-java#3066 ·
I maintainer di solito rispondono entro 1 giorno
-
bug client-api-v2 jdbc-v2
Difficoltà 1/5 1-3 ore Idoneità per principianti 78/100
ClickHouse/clickhouse-java#2957 · 1 commento ·
I maintainer di solito rispondono entro 1 giorno
-
bug client-v1 wontfix
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
ClickHouse/clickhouse-java#2895 · 1 commento ·
I maintainer di solito rispondono entro 1 giorno
Tutte le issue di ClickHouse/clickhouse-java
Issue simili
-
cbor
Difficoltà 2/5 1-3 ore Idoneità per principianti 84/100
FasterXML/jackson-dataformats-binary#844 ·
I maintainer di solito rispondono entro 1 giorno
-
improvement
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
apache/iceberg#18351 · 1 commento ·
I maintainer di solito rispondono entro 1 giorno
-
bug good first issue
Difficoltà 2/5 1-3 ore Idoneità per principianti 90/100
repowise-dev/repowise#2945 · 1 commento ·
I maintainer di solito rispondono entro 1 giorno
-
Interpolating settings.xml can lead to malformed XML when variable value contains double-hyphenApertabug
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
apache/maven#13321 · 1 commento ·
I maintainer di solito rispondono entro 1 giorno
-
bug
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
liquid-java/liquidjava#321 ·
I maintainer di solito rispondono entro 2 giorni