[Documentation] Worker for executing multiple Python functions
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 5/5
- Thời gian dự kiến
- Hơn một tuần
- Mức phù hợp với người mới
- 25/100
- Loại issue
- Tính năng
- Độ rõ ràng
- Cần làm rõ
- Mức độ hoạt động
- Đình trệ
- Công nghệ
- python
- Lĩnh vực
- distributed-systems, hpc
Hướng nghiên cứu
Issue không nêu tệp hoặc test nào. Hãy bắt đầu bằng cách so sánh SlurmClusterExecutor và FluxClusterExecutor với SlurmJobExecutor và FluxJobExecutor, bao gồm cả hành vi block_allocation hiện có được mô tả trong issue. Làm rõ liệu mục tiêu là tài liệu hay một khả năng mới của worker, sau đó xác định việc hoàn thành dựa trên khả năng thực thi nhiều hàm Python trên các tài nguyên cluster dùng chung.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
There are basically three ways to use a Python Task Managers:
- Submit each Python Function as an individual job to the HPC cluster - supported in executorlib by the
SlurmClusterExecutorand theFluxClusterExecutor. - Submit multiple Python Functions within one HPC job allocation - supported in executorlib by the
SlurmJobExecutorand theFluxJobExecutor. - Submit multiple Python Functions to the same resources on a given HPC cluster - similar to the
block_allocation=Truefor theSingleNodeExecutor, theSlurmJobExecutorand theFluxJobExecutorbut for theSlurmClusterExecutorand theFluxClusterExecutor. This is the standard use case for solutions like https://www.dask.org and https://parsl.readthedocs.io/ so it might be an interesting addition to executorlib.
- Ngôn ngữ chính
- Python
- Star
- 77
- Fork
- 7
- Merge trung bình
- 10 giờ 32 phút
- Pull request đã merge (30 ngày)
- 12
Hướng dẫn đóng góp
Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của pyiron/executorlib
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 68/100
pyiron/executorlib#1054 ·
-
bug
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 68/100
pyiron/executorlib#1032 ·
-
documentation
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 68/100
pyiron/executorlib#1005 ·
-
enhancement
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100
pyiron/executorlib#1049 · 1 bình luận ·
-
documentation
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 35/100
pyiron/executorlib#999 · 1 bình luận ·
Tất cả issue của pyiron/executorlib
Issue tương tự
-
bug
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100
stephrobert/dsoxlab#238 ·
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100
sublimehq/package_control#1780 ·
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 65/100
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 70/100
nwg-piotr/nwg-displays#145 ·