Proper shutdown for dask.distributed
Ninguém assumiu esta issue ainda.
Avaliação
- Dificuldade
- 4/5
- Tempo estimado
- 3-5 dias
- Facilidade para iniciantes
- 35/100
- Tipo de issue
- Bug
- Clareza
- Precisa de esclarecimento
- Status de atividade
- Estagnada
- Stack de tecnologia
- python
- Domínio
- distributed-systems
Direção de pesquisa
Comece por ipyparallel/client/client.py, na região de stop_dask, e compare-o com become_dask; inspecione como o executor e o cliente Dask são rastreados. Reproduza o aviso de distributed.client e, em seguida, verifique se o caminho de desligamento não deixa nenhum aviso quando stop_dask é chamado.
Escrita pelo modelo de indexação a partir do texto da issue.
Descrição
When using the stop_dask method of the ipyparallel.Client, the following warning message pops up.
distributed.client - WARNING - Client report stream closed to scheduler
However, if I run shutdown on the Dask client provided by become_dask, and then run stop_dask, the warning goes away.
Looking at the code in ipyparallel it is not obvious how it would handle calling shutdown as it does not know the Dask client in stop_dask. However it does seem shutdown needs to be called on the executor. How exactly should shutdown be done with dask.distributed?
- Linguagem predominante
- Jupyter Notebook
- Estrelas
- 2.6k
- Forks
- 1k
- Métricas de merge de PRs
- Nenhum PR com merge em 30d
Guia de contribuição
Primeiros passos
- Leia a issue inteira e depois o guia de contribuição do projeto.
- Comente na issue dizendo que vai assumir — evita que duas pessoas façam o mesmo trabalho.
- Faça um fork do repositório e trabalhe em uma branch.
- Abra um pull request que referencie o número da issue.
Mais de ipython/ipyparallel
-
Dificuldade 4/5 3-5 dias Facilidade para iniciantes 48/100
ipython/ipyparallel#1029 · 9 comentários ·
-
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 35/100
ipython/ipyparallel#984 ·
-
Dificuldade 4/5 3-5 dias Facilidade para iniciantes 35/100
ipython/ipyparallel#937 · 4 comentários ·
-
Packages and definitions loaded in the regular kernel are not known by engines and vice versa Abertaquestion
Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 25/100
ipython/ipyparallel#897 · 12 comentários ·
-
bug
Dificuldade 4/5 3-5 dias Facilidade para iniciantes 35/100
ipython/ipyparallel#882 ·
Todas as issues de ipython/ipyparallel
Issues semelhantes
-
bug examples invalid iris
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 70/100
-
ai_reviewed
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 68/100
ydb-platform/ydb#53838 · 3 comentários ·
-
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 82/100
NovaSky-AI/SkyRL#2263 ·
-
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 75/100
johanhaleby/occurrent#1106 ·
-
ShuffleManagerRegistry.register recursion guard is inverted, permits GlutenShuffleManager subclasses Aberta
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 78/100