pingcap/tidb

Improve observability of fast reorg ADD INDEX progress

Open

#56.986 aberto em 30 de out. de 2024

Ver no GitHub
 (6 comments) (0 reactions) (1 assignee)Go (6.186 forks)batch import
component/ddlgood first issuetype/enhancement

Métricas do repositório

Stars
 (40.090 stars)
Métricas de merge de PR
 (Mesclagem média 14d 4h) (346 fundiu PRs em 30d)

Description

Enhancement

currently we only let progress forward when KV is written to TiKV. When fast reorg is enabled, data will be batched on disk for a long time. No progress will be made during that stage and some users may suspect DDL is stuck.

So I propose we draw another line in metrics, which means "how many record KV we have read to assume the index KV".

Guia do colaborador

Direção de pesquisa
Examine a implementação de reorganização rápida no pacote DDL, especificamente como os dados de índice são processados em lotes. Identifique as métricas existentes (por exemplo, `ddl worker operation duration`) e determine onde adicionar uma nova métrica para leituras de KV de registros. Revise o uso da biblioteca cliente Prometheus na base de código. Em seguida, implemente a nova métrica e atualize o painel do Grafana, se aplicável.
Pilha de tecnologia
go
Domain
backenddatabase
Tipo Issue
Funcionalidade
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
3
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
1-3 horas
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Claro
Prerequisites
GoPrometheusTiDB internals (DDL)
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
60