Group.__init() should be parallelised

Đang mở

#28 mở ngày 21/7/2017 1 bình luận 0 reaction 0 người được giao Xem trên GitHub

Chưa có ai nhận issue này.

Đánh giá

Độ khó: 4/5
Thời gian dự kiến: 3-5 ngày
Mức phù hợp với người mới: 35/100

Loại issue: Lỗi
Độ rõ ràng: Khá rõ ràng
Mức độ hoạt động: Đình trệ
Công nghệ: python
Lĩnh vực: distributed-systems

Hướng nghiên cứu

Bắt đầu trong multi.py tại Group.init và kiểm tra gateway_base.py quanh dòng 360, nơi patch được báo cáo gây ra deadlock. Tái hiện quá trình khởi tạo với nhiều gateway SSH và so sánh hành vi với patch đính kèm. Được coi là hoàn tất khi quá trình khởi tạo Group kết nối tới các host song song mà không bị deadlock, đồng thời Group.remote_exec() vẫn tiếp tục hoạt động.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Mô tả

Bitbucket: https://bitbucket.org/hpk42/execnet/issue/28
Originally reported by: @crusaderky
Originally created at: 2014-01-22T16:51:21.959

Consider the following snippet:

hosts = [...list of hosts...]
group = execnet.Group(("ssh %s" % host for host in hosts))
group.remote_exec(something)

Imagine having a grid of 200 hosts.
While Group.remote_exec() will run on all the hosts in parallel, Group.__init__() will connect via ssh to each one of them, serially. On a typical LAN, this easily accounts to minutes.

I attach a patch for multi.py (on top of the latest hg commit) that is intended to fix the problem. However, with that patch the program deadlocks in gateway_base.py, line 360, and I can't figure out the reason.

Ngôn ngữ chính: Python
Star: 102
Fork: 47
Chỉ số merge pull request: Không có pull request nào được merge trong 30 ngày

Hướng dẫn đóng góp

Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này

Bắt đầu từ đâu

Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
Fork repository và làm thay đổi trên một nhánh.
Mở pull request có tham chiếu số hiệu của issue.

Issue khác của pytest-dev/execnet

safe_terminate() leaves the abandoned termfunc thread running and reports success anyway Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 45/100

pytest-dev/execnet#429 · 1 bình luận · Mở ngày 18/9/2026
IPv6 support Đang mở

Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

pytest-dev/execnet#384 · Mở ngày 25/11/2025
non-deterministic test_channel test failure Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 45/100

pytest-dev/execnet#374 · 3 bình luận · Mở ngày 4/11/2025
`testing/test_channel.py::TestChannelBasicBehaviour::test_channel_callback_remote_freed` tests fail on Python 3.13.0 freethreading Đang mở

Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 45/100

pytest-dev/execnet#306 · 1 bình luận · Mở ngày 14/10/2024
2.1.1: `test_popen_io[gevent-sys.executable]` fails Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100

pytest-dev/execnet#279 · 1 reaction · Mở ngày 28/5/2024

Tất cả issue của pytest-dev/execnet

Issue tương tự

slack-gif-creator: validate_gif() multiplies the last frame's duration by the frame count, so reported duration/fps are wrong (1.0s GIF reported as 1.8s) Đang mở

Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100

anthropics/skills#1811 · 1 bình luận · Mở ngày 23/9/2026
App fails to start with gradio 6 (allowed by `gradio>=5.49.1`) Đang mở

Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100

speaches-ai/speaches#678 · Mở ngày 23/9/2026
ModuleNotFoundError: No module named 'mcp.server.fastmcp'. Đang mở

bug

Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100

datalayer/mcp-compose#42 · Mở ngày 23/9/2026
import spacy fails with ModuleNotFoundError: No module named 'click' Đang mở

Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100

conda-forge/spacy-feedstock#177 · Mở ngày 23/9/2026
humaneval: extract_function_body corrupts a fenced body-only reply, so the same correct code scores INCORRECT fenced and CORRECT unfenced Đang mở

Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 70/100

UKGovernmentBEIS/inspect_evals#2523 · Mở ngày 23/9/2026

Thêm issue về Python