`kafka_event_aggregator`: backpressure
Ninguém assumiu esta issue ainda.
Avaliação
- Dificuldade
- 5/5
- Tempo estimado
- Mais de uma semana
- Facilidade para iniciantes
- 45/100
- Tipo de issue
- Funcionalidade
- Clareza
- Razoavelmente clara
- Status de atividade
- Ativa
- Stack de tecnologia
- kafka
- Domínio
- stream-processing
Direção de pesquisa
Comece pelo ponto de entrada kafka_event_aggregator e rastreie como o tamanho da fila do producer, as leituras do consumer e os limites dos frames são tratados. Defina os limites N/M e confirme como a pausa no meio de um frame deve funcionar; o trabalho estará concluído quando a pausa e a recuperação do consumer, os avisos e as métricas de pausa estiverem implementados sem perder ou tratar incorretamente frames parciais.
Escrita pelo modelo de indexação a partir do texto da issue.
Descrição
If producer queue fills beyond N bytes, pause consumer until it recovers to less than M bytes (and provide warnings + metrics about consumer pause).
(need to consider behaviour on pausing consumer mid-frame - we are likely to get partial frames in that case)
- Linguagem predominante
- Sem dados de linguagem
- Estrelas
- 0
- Forks
- 0
- Métricas de merge de PRs
- Nenhum PR com merge em 30d
Guia de contribuição
Nenhum guia de contribuição indexado para este repositório
Primeiros passos
- Leia a issue inteira e depois o guia de contribuição do projeto.
- Comente na issue dizendo que vai assumir — evita que duas pessoas façam o mesmo trabalho.
- Faça um fork do repositório e trabalhe em uma branch.
- Abra um pull request que referencie o número da issue.
Mais de ISISComputingGroup/DataStreaming
-
ISISComputingGroup/DataStreaming#115 · 1 responsável ·
-
ISISComputingGroup/DataStreaming#114 · 1 responsável ·
-
Dificuldade 4/5 3-5 dias Facilidade para iniciantes 35/100
-
Dificuldade 3/5 1-2 dias Facilidade para iniciantes 48/100
-
`kafka_dae_control`: unset pause on runstart, or set it if doing an explicit `begin(paused=True)` Aberta
ISISComputingGroup/DataStreaming#109 · 1 comentário · 1 responsável ·
Todas as issues de ISISComputingGroup/DataStreaming
Issues semelhantes
-
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 78/100
-
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 86/100
membraneframework/boombox#149 · 1 responsável ·
-
automation flaky-test Integration:kafka_input_otel Team:obs-ds-intake-services
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 70/100
elastic/integrations#21346 ·
-
priority: P2
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 72/100
-
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 82/100
vectordotdev/vector#26389 ·