grafana/loki

Does loki support migrating from one s3 cluster to another

Open

#10.711 aberto em 26 de set. de 2023

Ver no GitHub
 (0 comments) (0 reactions) (0 assignees)Go (28.187 stars) (3.997 forks)batch import
help wantedtype/question

Description

I have a requirement to switch from cluster 1 of s3 to cluster 2 of s3 to ensure that the data of cluster 1 and cluster 2 can be read simultaneously.

From the perspective of configuration format, it seems that I support writing one s3 cluster. How should I write the configuration, or loki does not support writing two s3 clusters at the same time

Guia do colaborador

Pilha de tecnologia
goaws
Domain
backend
Tipo Issue
feature
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
3
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
1-3 hours
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
needs maintainer response
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
needs investigation
Prerequisites
Familiarity with Loki's storage configTwo S3 clusters
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
30
Direção de pesquisa
To answer this issue, first check Loki's official documentation on storage configuration, especially the 'storage' section in the config file. Look for parameters that allow multiple S3 endpoints or backends. Then, examine the source code in `pkg/storage/` to see if there is support for multiple S3 clusters or if a feature request exists. Also, search for related issues or PRs in the repository for 'multi cluster S3' or 'migrate S3'.