SGE template: Signal SIGINT by default to allow R to catch it gracefully
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 4/5
- Thời gian dự kiến
- 3-5 ngày
- Mức phù hợp với người mới
- 50/100
- Loại issue
- Tính năng
- Độ rõ ràng
- Khá rõ ràng
- Mức độ hoạt động
- Ít trao đổi
- Công nghệ
- bash, r
- Lĩnh vực
- distributed-systems
Hướng nghiên cứu
Bắt đầu với template SGE mặc định và theo dõi cách rscript_call, uri và batchtools::doJobCollection khởi chạy job. Xem xét trap Bash SIGUSR2 được đề xuất và luồng chờ tiến trình, sau đó xác minh rằng giới hạn thời gian sắp đến được truyền tới R dưới dạng SIGINT và cho phép dọn dẹp đúng cách trước khi tiến trình kết thúc.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
When a job is approaching it's maximum run-time limit, and --notify has been specified, SGE sends a SIGUSR2 60 seconds before sending a SIGKILL (abrupt; not capturable).
R code cannot handle SIGUSR2 signals, only SIGINT. If SGE would signal SIGINT instead, we could capture it internally as an interrupt condition, and using tryCatch(..., interrupt = ...), on.exit(), and likes to gracefully exit, e.g. close connections, checkpoint intermediate results, etc.
Idea
Update the default SGE template to signal SIGINT. Unlike Slurm, there is no user-facing option to change the type of signal in SGE. But we could use Bash traps to capture the SIGUSR2 and re-signal it as SIGINT. Something like:
#! /bin/bash
...
## Request SGE to send warning signals (SIGUSR2) before run-time limit termination
#$ -notify
...
# Function to catch SGE run-time signals and re-signal as SIGINT
forward_sigint() {
echo "Caught SGE run-time signal. Re-signal as SIGINT to R..."
kill -2 "${R_PID}" 2>/dev/null || true
wait "${R_PID}"
res=$?
echo " - exit code (from signal handler): ${res}"
exit "${res}"
}
# Trap SGE run-time limit signals
trap forward_sigint SIGUSR2
<%= rscript_call %> -e 'batchtools::doJobCollection("<%= uri %>")' &
R_PID=$!
wait "${R_PID}"
res=$?
# Clear the trap on normal exit
trap - SIGUSR2
- Ngôn ngữ chính
- R
- Star
- 87
- Fork
- 10
- Chỉ số merge pull request
- Không có pull request nào được merge trong 30 ngày
Chuẩn bị môi trường
- Không có Dockerfile hay tệp Docker Compose
- Không có mẫu pull request
- Đọc hướng dẫn đóng góp
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của futureverse/future.batchtools
-
feature/resources scheduler/lsf
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 68/100
futureverse/future.batchtools#105 ·
-
feature/resources scheduler/slurm
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 66/100
futureverse/future.batchtools#103 ·
-
Add batchtools_hyperqueue()Đang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 55/100
futureverse/future.batchtools#102 ·
-
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 35/100
-
feature/resources
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 38/100
futureverse/future.batchtools#75 · 4 bình luận ·
Tất cả issue của futureverse/future.batchtools
Issue tương tự
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 70/100
-
add bootmlmĐang mở
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 62/100
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 62/100
extendr/extendr.github.io#134 ·
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 68/100
nmfs-ost/stockplotr#416 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 88/100