cube-js/cube

Pre-aggregation queries are not GTID safe - MySQL

Open

#1810 aperta il 19 gen 2021

Vedi su GitHub
 (5 commenti) (0 reazioni) (0 assegnatari)Rust (1965 fork)batch import
driver:mysqlhelp wanted

Metriche repository

Star
 (19.563 star)
Metriche merge PR
 (Merge medio 5g 16h) (138 PR mergiate in 30 g)

Descrizione

Describe the bug

Queries to create pre-agg tables use CREATE TABLE ... SELECT syntax. This syntax is not valid when running MySQL with GTID based replication. see here

GTID based replication also happens to be used by Google CloudSQL and is not configurable. This means that pre-aggregations cannot by used.

Note: This issue theoretically will also appear when using statement based replication.

To Reproduce Run a MySQL database using GTIDs for replication

Add a cube with a pre-aggregation. Will fail with an error like "Error: ER_GTID_UNSAFE_CREATE_SELECT: Statement violates GTID consistency: CREATE TABLE ... SELECT."

Expected behavior Pre-aggregation queries should be safe for statement based replication as well as replication with GTIDs.

Guida contributor

Direzione di ricerca
Analizza il codice di generazione SQL specifico per MySQL in Cube.js per le pre aggregazioni. L'implementazione attuale utilizza `CREATE TABLE ... SELECT`, che non è sicuro per GTID. Una possibile correzione è suddividerlo in due istruzioni: `CREATE TABLE ... LIKE` e `INSERT INTO ... SELECT`. Esamina i file nelle directory `packages/cubejs query orchestrator` o `packages/cubejs schema compiler` per il dialetto MySQL. Controlla i commenti dell'issue per eventuali soluzioni proposte o indicazioni dei maintainer.
Tech stack
rustsql
Dominio
backenddatabase
Tipo issue
Bug
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
1-2 giorni
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
SQLMySQLreplication
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
30