pingcap/tiflow

Optimization for DDL execution

Ouverte

#866 ouverte le 20 août 2020

Voir sur GitHubGuide contributeur
 (1 commentaire) (0 réaction) (1 personne assignée)Go (310 forks)auto 404
component/replica-modelcomponent/sinkhelp wanted

Métriques du dépôt

Stars
 (461 étoiles)
Métriques de merge PR
 (Métriques PR en attente)

Description

Feature Request

Is your feature request related to a problem? Please describe:

In the current replication model, DDL is executed synchronously and blocks all DMLs in other tables. This could cause replication block in some scenarios

  • the DDL is slow, such add index to a large table.
  • the replication of one table is slow, other tables will have to wait for this table catch up because the DDL is a strong barrier.

Describe the feature you'd like:

  • Currently DDL execution has no timeout, should we add some restriction. https://github.com/pingcap/ticdc/pull/936
  • Once the add index command has been sent to TiDB, even the client is timeout, we can ignore this error and continue replication.
  • Could we add some mechanism to allow single table DDL doesn't block DML replication of other tables.

Guide contributeur

Direction de recherche
Examinez l'exécution actuelle des DDL dans la réplication TiCDC, comprenez comment elle bloque les DML et proposez un mécanisme de temporisation ou une approche non bloquante pour que les DDL d'une seule table ne bloquent pas la réplication des autres tables.
Stack technique
go
Domaine
backend
Type d'issue
Fonctionnalité
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
3
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
1-2 jours
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
GitGo
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
40