kudu维表join 出来的数据会有重复

Offen

#346 erstellt am 14.8.2020 3 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen

Dieses Issue hat noch niemand übernommen.

Bewertung

Schwierigkeit: 4/5
Geschätzter Aufwand: 3-5 Tage
Anfängerfreundlichkeit: 25/100

Issue-Typ: Bug
Klarheit: Muss geklärt werden
Aktivitätsstatus: Veraltet
Tech-Stack: sql
Bereich: data-engineering, databases

Rechercherichtung

Beginnen Sie mit der bereitgestellten Kudu-DDL für die Dimensionstabelle und reproduzieren Sie den Join gegen d_goods_wlm_sku_rel. Untersuchen Sie die resultierenden Zeilen und ermitteln Sie, ob die Duplikate aus der Join-Semantik, den Quellschlüsseln oder der Caching-Konfiguration stammen. Als erledigt gilt die Aufgabe, wenn das erwartete Join-Ergebnis keine unbeabsichtigten doppelten Datensätze enthält; vor Beginn der Arbeit benötigt das issue jedoch eine Abfrage und eine erwartete Ausgabe.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Beschreibung

---kudu维表语句
CREATE TABLE side_rt_d_spu_sku_relation(
spu_id int,
sku_ids varchar,
PRIMARY KEY(spu_id),
PERIOD FOR SYSTEM_TIME
)WITH(
type ='kudu',
master ='xxxxxx'
tableName='d_goods_wlm_sku_rel',
cache ='LRU',
cacheSize ='10000',
cacheTTLMs ='60000',
parallelism ='1',
partitionedJoin='false'
);

Vorherrschende Sprache: Java
Sterne: 2k
Forks: 913
PR-Merge-Kennzahlen: Keine gemergten PRs in 30 T.

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Erste Schritte

Lesen Sie das ganze Issue und danach den Beitragsleitfaden des Projekts.
Schreiben Sie ins Issue, dass Sie es übernehmen — das erspart doppelte Arbeit.
Forken Sie das Repository und arbeiten Sie in einem Branch.
Öffnen Sie einen Pull Request, der die Issue-Nummer nennt.

Mehr aus DTStack/flinkStreamSQL

Flink SQL 使用滚动窗口，能不能获取到延迟数据，跟datastream一样，可以放到侧输出里面 Offen

Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 20/100

DTStack/flinkStreamSQL#467 · 1 Kommentar · Erstellt am 27.9.2024
这个如何引入使用flink-connector-hive啊 Offen

Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 25/100

DTStack/flinkStreamSQL#437 · 3 Kommentare · Erstellt am 25.2.2022
kudu sink writemode参数没填写报NULLPointerException Offen

Schwierigkeit 3/5 1-2 Tage Anfängerfreundlichkeit 38/100

DTStack/flinkStreamSQL#432 · 1 Kommentar · Erstellt am 16.11.2021
新版FlinkStreamSQL已经融合进FlinkX项目 Offen

Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 15/100

DTStack/flinkStreamSQL#431 · Erstellt am 01.11.2021
有无对sql 语法校验的方法 Offen

Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 15/100

DTStack/flinkStreamSQL#430 · 1 Kommentar · Erstellt am 08.10.2021

Alle Issues in DTStack/flinkStreamSQL