GoogleCloudPlatform/cloud-data-quality

add more default rule types

Aberta

#2 aberto em 3 de abr. de 2021

Ver no GitHubGuia do colaborador
 (3 comentários) (0 reação) (0 responsável)Python (58 forks)auto 404
good first issuehelp wanted

Métricas do repositório

Stars
 (280 estrelas)
Métricas de merge de PR
 (Métricas PR pendentes)

Description

We should be able to implement all of dbt's schema tests as CUSTOM_SQL_STATEMENT. There may be other rules we can implement from https://docs.greatexpectations.io/en/latest/reference/glossary_of_expectations.html#dataset.

We should consider how to allow rules that reference multiple tables using references to tables (with overrides). The current alternative is to parameterize the table names.

It it make sense we may want to implement the rule directly in https://github.com/GoogleCloudPlatform/cloud-data-quality/blob/main/clouddq/classes/rule_type.py

Guia do colaborador

Direção de pesquisa
Revise os testes de esquema do dbt e as expectativas do Great Expectations listados no problema. Entenda como as regras CUSTOM SQL STATEMENT são definidas em clouddq/classes/rule type.py. Identifique quais testes podem ser implementados como regras de tabela única e quais exigem referências a várias tabelas. Considere a parametrização dos nomes das tabelas.
Pilha de tecnologia
pythonsql
Domain
databackend
Tipo Issue
Funcionalidade
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
3
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
3-5 dias
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Principalmente claro
Prerequisites
GitPythonSQL
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
60