GoogleCloudPlatform/cloud-data-quality

add more default rule types

Aperta

#2 aperta il 3 apr 2021

Vedi su GitHubGuida contributor
 (3 commenti) (0 reazioni) (0 assegnatari)Python (58 fork)auto 404
good first issuehelp wanted

Metriche repository

Star
 (280 stelle)
Metriche merge PR
 (Metriche PR in attesa)

Descrizione

We should be able to implement all of dbt's schema tests as CUSTOM_SQL_STATEMENT. There may be other rules we can implement from https://docs.greatexpectations.io/en/latest/reference/glossary_of_expectations.html#dataset.

We should consider how to allow rules that reference multiple tables using references to tables (with overrides). The current alternative is to parameterize the table names.

It it make sense we may want to implement the rule directly in https://github.com/GoogleCloudPlatform/cloud-data-quality/blob/main/clouddq/classes/rule_type.py

Guida contributor

Direzione di ricerca
Esamina i test dello schema dbt e le aspettative di Great Expectations elencate nel problema. Comprendi come vengono definite le regole CUSTOM SQL STATEMENT in clouddq/classes/rule type.py. Identifica quali test possono essere implementati come regole a tabella singola e quali richiedono riferimenti a più tabelle. Considera la parametrizzazione dei nomi delle tabelle.
Tech stack
pythonsql
Dominio
databackend
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
3-5 giorni
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Abbastanza chiara
Prerequisiti
GitPythonSQL
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
60