Number of processes started by IPyParallel clusters
Ninguém assumiu esta issue ainda.
Avaliação
- Dificuldade
- 4/5
- Tempo estimado
- 3-5 dias
- Facilidade para iniciantes
- 25/100
- Tipo de issue
- Documentação
- Clareza
- Precisa de esclarecimento
- Status de atividade
- Estagnada
- Stack de tecnologia
- jupyter, python
- Domínio
- distributed-systems, documentation
Direção de pesquisa
Comece pelas contagens de processos descritas no issue e compare-as com a documentação de all-connections na referência de conexões vinculada. Determine se as contagens de processos de controller e engine relatadas são esperadas e documente o resultado e qualquer forma compatível de reduzi-las; o issue estará concluído quando o comportamento e as orientações estiverem claros.
Escrita pelo modelo de indexação a partir do texto da issue.
Descrição
A lot of users seem to be surprised by the number of processes that are started as part of an IPyParallel cluster. In my testing, we seem to start 2 processes per engine (the engine itself and the nanny), an mpiexec process in case of MPI-Launcher, and 9 processes for the controller. The number of controller processes seem to be higher than expected (5 vs 9) based on: https://ipyparallel.readthedocs.io/en/latest/reference/connections.html#all-connections.
- Is this in line with what you expect (9 processes)? If so, is this a documentation issue that we could fix? If not, is this a bug that needs to be fixed?
- Is there a way to reduce the number of processes required in general across the board, in particular for the controller?
- Can we improve the documentation on this in general?
- Linguagem predominante
- Jupyter Notebook
- Estrelas
- 2.6k
- Forks
- 1k
- Métricas de merge de PRs
- Nenhum PR com merge em 30d
Guia de contribuição
Primeiros passos
- Leia a issue inteira e depois o guia de contribuição do projeto.
- Comente na issue dizendo que vai assumir — evita que duas pessoas façam o mesmo trabalho.
- Faça um fork do repositório e trabalhe em uma branch.
- Abra um pull request que referencie o número da issue.
Mais de ipython/ipyparallel
-
Dificuldade 4/5 3-5 dias Facilidade para iniciantes 48/100
ipython/ipyparallel#1029 · 9 comentários ·
-
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 35/100
ipython/ipyparallel#984 ·
-
Dificuldade 4/5 3-5 dias Facilidade para iniciantes 35/100
ipython/ipyparallel#937 · 4 comentários ·
-
Packages and definitions loaded in the regular kernel are not known by engines and vice versa Abertaquestion
Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 25/100
ipython/ipyparallel#897 · 12 comentários ·
-
bug
Dificuldade 4/5 3-5 dias Facilidade para iniciantes 35/100
ipython/ipyparallel#882 ·
Todas as issues de ipython/ipyparallel
Issues semelhantes
-
bug examples invalid iris
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 70/100
-
ai_reviewed
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 68/100
ydb-platform/ydb#53838 · 3 comentários ·
-
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 82/100
NovaSky-AI/SkyRL#2263 ·
-
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 75/100
johanhaleby/occurrent#1106 ·
-
ShuffleManagerRegistry.register recursion guard is inverted, permits GlutenShuffleManager subclasses Aberta
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 78/100