GoogleCloudPlatform/spanner-migration-tool

Validate data written to Spanner

Aperta

#19 aperta il 27 gen 2020

Vedi su GitHubGuida contributor
 (1 commento) (0 reazioni) (0 assegnatari)PLpgSQL (81 fork)auto 404
good first issuep4

Metriche repository

Star
 (152 stelle)
Metriche merge PR
 (Metriche PR in attesa)

Descrizione

After data is written to Spanner, read it back and check it matches the data from the pg_dump.

At a minimum, we could check row counts for each table.

We could also: a) check actual data, but just do this for a sampled set of data, or b) check all data (probably requires another pass over the pg_dump for large datasets).

Guida contributor

Direzione di ricerca
Esamina il percorso di scrittura esistente nel tool di migrazione (probabilmente scritto in Go) e comprendi come i dati vengono scritti in Spanner dal pg dump. Quindi progetta un passo di validazione che rilegga i dati scritti (conteggio righe e opzionalmente dati campionati) e li confronti con il pg dump originale. Cerca nell'infrastruttura di test esistente e negli esempi di validazioni simili nel codebase.
Tech stack
gopostgresql
Dominio
databasecloud
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
2
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
3-5 giorni
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Abbastanza chiara
Prerequisiti
GoSQL
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
65