event_dispatcher 数量设置咨询
Mantenedores costumam responder em até 2 dias
Ninguém assumiu esta issue ainda.
Avaliação
- Dificuldade
- 5/5
- Tempo estimado
- Mais de uma semana
- Facilidade para iniciantes
- 35/100
- Tipo de issue
- Funcionalidade
- Clareza
- Precisa de esclarecimento
- Status de atividade
- Pouca atividade
- Stack de tecnologia
- cpp
- Domínio
- backend-api-design, distributed-systems
Direção de pesquisa
Comece revisando a configuração event_dispatcher_num, o comportamento de signal_task e as restrições discutidas em issue #1120. Meça o impacto de diferentes quantidades de dispatchers entre grupos marcados e documente se é necessária uma configuração por grupo ou baseada em workers. Considera-se concluído quando houver uma recomendação de configuração acordada ou uma proposta de funcionalidade claramente delimitada.
Escrita pelo modelo de indexação a partir do texto da issue.
Descrição
在我们的场景中,通过 brpc 框架传输数据量较大。单个客户端可能会和多个服务端建立连接。在流量较小时(大量 brpc_worker 都阻塞在 parking log上),如果单次发送大量请求后返回。极端情况下分为两种可能,会影响系统长尾时延
- 通过一个 fd 接收所有的 repsonse,此时虽然能产生 n 个 bthread,但是加了nosignal的flag。最后的 bthread_flush 只能唤醒最多 2 个 brpc_worker 消费。其实大量的 response 都是在串行消费。 这里是 signal_task 为了权衡性能和调度及时性,所以设置成了2。目前来看好像已经是最优设置?
- 如果 response 通过多个 fd 接收。fd 的 消费在一个 event_dispatcher 中是串行的,此时也会存在大量response 串行消费的问题。但是这种场景下,可以通过增加 event_dispatcher 的数量,来提升唤醒并消费任务的 brpc_worker 数量, 实测可以提升一些性能。
这里有几个问题咨询一下
- event_dispatcher 数量设置有什么建议参考吗?event_dispatcher 较多对性能有副影响么?
- 当前 event_dispatcher_num 设置是不区分 tag 的,即每个 tagged group 都会初始化 event_dispatcher_num 个 bthread。但是基于实际需求,每个 tagged group 中的 brpc_worker 数实际上是不一样的。之前 https://github.com/apache/brpc/issues/1120 中提到过,event_dispatcher_num 的大小不能大于等于 brpc_worker 的数量,否则会存在问题。导致在多 tag 场景下设置 event_dispatcher_num 不太灵活,是不是应该有类似于分别设置或者每 n 个 brpc_worker 初始化一个 event_dispatcher 的参数。
- Linguagem predominante
- C++
- Estrelas
- 17.6k
- Forks
- 4.2k
- Merge médio
- 3d 17h
- PRs com merge (30d)
- 72
Preparar o ambiente
- Inclui um Dockerfile ou arquivo Docker Compose
- Tem um modelo de pull request
- Ler o guia de contribuição
Primeiros passos
- Leia a issue inteira e depois o guia de contribuição do projeto.
- Comente na issue dizendo que vai assumir — evita que duas pessoas façam o mesmo trabalho.
- Faça um fork do repositório e trabalhe em uma branch.
- Abra um pull request que referencie o número da issue.
Mais de apache/brpc
-
Dificuldade 1/5 1-3 horas Facilidade para iniciantes 88/100
Mantenedores costumam responder em até 2 dias
-
endpoint2hostname() prints a byte-swapped port for IPv6 endpointsTalvez já em andamento @0z5a assumiu há 8 dias. Aberta
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 86/100
Mantenedores costumam responder em até 2 dias
-
perf(butil): ARM64 (aarch64) performance and modernisation improvements across atomics, CRC32C, spin-wait hints, and fast timersTalvez já em andamento @jimmystewpot assumiu há 2 dias. Aberta
Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 12/100
Mantenedores costumam responder em até 2 dias
-
file:// naming service takes a comment after the address as the tagTalvez já em andamento @0z5a assumiu há 8 dias. Aberta
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 35/100
Mantenedores costumam responder em até 2 dias
-
Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 25/100
Mantenedores costumam responder em até 2 dias
Todas as issues de apache/brpc
Issues semelhantes
-
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 77/100
protocolbuffers/protobuf#31768 ·
Mantenedores costumam responder em até 1 dia
-
Needs: Triage :mag: Platform: Android
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 78/100
react/react-native#60167 ·
Mantenedores costumam responder em até 2 dias
-
Level format documentationAbertadocumentation
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 63/100
-
tests: ofx_render_test doesn't compile against FFmpeg 4.x (const AVCodec* to av_find_best_stream)Aberta
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 78/100
NatronGitHub/openfx-io#221 · 1 comentário ·
Mantenedores costumam responder em até 1 dia
-
bug
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 72/100
subsurface/subsurface#5145 ·
Mantenedores costumam responder em até 2 dias