pingcap/tiflow

Further refinement of the canal protocol

Aberta

#697 aberto em 28 de jun. de 2020

Ver no GitHubGuia do colaborador
 (5 comentários) (2 reações) (0 responsável)Go (310 forks)auto 404
component/sinkdifficulty/hardhelp wantedsubject/new-feature

Métricas do repositório

Stars
 (461 estrelas)
Métricas de merge de PR
 (Métricas PR pendentes)

Description

Feature Request

Is your feature request related to a problem? Please describe:

The current canal protocol implementation only supports the replication of row-level changelogs. We would like to support a more complete canal protocol to improve its universality.

Describe the feature you'd like:

  • Support more field in canal protocol (such as Column.mysqlType)
  • Support transaction in canal protocol (TransactionBegin and TransactionEnd message), only need to support single table transaction now.
  • Add a canal demo consumer, used in the integration test to verify the protocol works as expected.

Teachability, Documentation, Adoption, Migration Strategy:

Canal proto: https://github.com/pingcap/ticdc/tree/master/proto

Guia do colaborador

Direção de pesquisa
Estude as definições protobuf do protocolo canal existente e o código de replicação em nível de linha. Concentre se em adicionar as mensagens TransactionBegin e TransactionEnd e implemente um consumer de demonstração para testes de integração.
Pilha de tecnologia
go
Domain
backenddatabaseapidata
Tipo Issue
Funcionalidade
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
2
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
1-2 dias
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Recente
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Claro
Prerequisites
GitGo
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
70