[Question] What is the best way to parallelize on the graph level
Ninguém assumiu esta issue ainda.
Avaliação
- Dificuldade
- 5/5
- Tempo estimado
- Mais de uma semana
- Facilidade para iniciantes
- 25/100
- Tipo de issue
- Funcionalidade
- Clareza
- Precisa de esclarecimento
- Status de atividade
- Estagnada
- Stack de tecnologia
- python
- Domínio
- stream-processing
Direção de pesquisa
Start by reading the existing Dask extensions and tracing how the stream graph currently executes nodes. Determine whether graph-level parallelism requires a design change or an implementation, then document or implement a clearly defined approach and verify that independent nodes can run concurrently without changing existing behavior.
Escrita pelo modelo de indexação a partir do texto da issue.
Descrição
The dask extensions have given us the ability to parallelize on the "inside a node" level. However, some nodes can be run completely independently from one another. What is the best way to access that level of parallelizem?
- Linguagem predominante
- Python
- Estrelas
- 1.3k
- Forks
- 149
- Merge médio
- 17h 39min
- PRs com merge (30d)
- 1
Guia de contribuição
Primeiros passos
- Leia a issue inteira e depois o guia de contribuição do projeto.
- Comente na issue dizendo que vai assumir — evita que duas pessoas façam o mesmo trabalho.
- Faça um fork do repositório e trabalhe em uma branch.
- Abra um pull request que referencie o número da issue.
Mais de python-streamz/streamz
-
pkg_resources warning Aberta
Dificuldade 3/5 1-2 dias Facilidade para iniciantes 35/100
python-streamz/streamz#481 · 4 comentários ·
-
Combining the streamz.Stream.filenames() and streamz.Stream.from_textfile() using dask scatter? Aberta
Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 25/100
python-streamz/streamz#480 · 2 comentários ·
-
Compile the code into c++ Aberta
Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 20/100
python-streamz/streamz#479 · 1 comentário ·
-
Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 20/100
python-streamz/streamz#478 · 6 comentários ·
-
Dificuldade 4/5 3-5 dias Facilidade para iniciantes 10/100
python-streamz/streamz#476 · 17 comentários · 2 reações ·
Todas as issues de python-streamz/streamz
Issues semelhantes
-
bug
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 75/100
xinnan-tech/xiaozhi-fde-talk#263 ·
-
rules
Dificuldade 1/5 Menos de uma hora Facilidade para iniciantes 90/100
-
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 70/100
huggingface/Repo2RLEnv#163 · 1 comentário ·
-
Dificuldade 1/5 Menos de uma hora Facilidade para iniciantes 95/100
huggingface/sentence-transformers#4074 ·
-
comp/dashboard invalid P3
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 70/100
NousResearch/hermes-agent#121143 ·