[Bug] PL/Python statement_timeout can leave a zombie subprocess despite finally: wait()
Maintainer thường phản hồi trong vòng 2 ngày
Đánh giá
Issue này chưa được đánh giá.
Mô tả
Apache Cloudberry version
main, probably REL_2_STABLE
What happened
When statement_timeout cancels a PL/Python function waiting in subprocess.Popen.communicate(), the SQL statement can return a cancellation error while its timeout child remains a zombie, despite an explicit process.wait() in a finally block.
The zombie remains a child of the backend after subsequent SQL statements and disappears when the backend session closes. The monitored command itself has already finished.
This was discovered while reviewing #2117, but also reproduces with a harmless sleep command and does not require diskquota or segment recovery.
What you think should happen instead
The exited subprocess should be reaped before the cancellation error is returned to the client.
How to reproduce
The measured runs used coordinator connections with options='-c gp_role=utility' and autocommit enabled.
To reproduce under the same conditions, start an interactive psql session connected to the coordinator. Replace the placeholders with your connection details:
PGOPTIONS='-c gp_role=utility' psql -h <coordinator_host> -p <coordinator_port> -d <database>
Run the following statements with autocommit enabled and without an explicit transaction. Record the value returned by SELECT pg_backend_pid();.
CREATE EXTENSION IF NOT EXISTS plpython3u;
CREATE OR REPLACE FUNCTION public.zombie_repro()
RETURNS void LANGUAGE plpython3u AS $$
import subprocess
p = subprocess.Popen(
['timeout', '-k', '1', '5', 'sleep', '0.3'],
stdout=subprocess.PIPE,
stderr=subprocess.STDOUT
)
try:
p.communicate()
finally:
p.wait()
$$;
SELECT pg_backend_pid();
SET statement_timeout = '100ms';
SELECT public.zombie_repro();
RESET statement_timeout;
SELECT 1;
Keep the psql session open after the timeout error. From another terminal on the coordinator host, inspect the backend’s child processes, replacing <backend_pid> with the recorded PID:
ps -o pid,ppid,stat,comm --ppid <backend_pid>
When the issue reproduces, a timeout process appears with STAT containing Z and PPID matching the backend PID. It persists after subsequent SQL statements and disappears when the session closes.
The result is timing-dependent and does not occur on every invocation. If necessary, repeat the procedure using a fresh connection for each attempt.
Observed reproduction rates:
- Minimal example above: 16 out of 20 independent backend sessions.
- Exact
pg_recoverseghelper from #2117, invoking realgprecoverseg: 12 out of 20 independent backend sessions.
Every attempt returned SQLSTATE 57014 from the function call. Zombie detection was performed after RESET statement_timeout, a 200 ms delay, and SELECT 1. A separate check confirmed persistence after two seconds and another SELECT 1.
Each attempt closed its connection afterwards, so the counts do not include children left by previous attempts.
Operating System
Any
Anything else
The results above were verified in this environment:
- Ubuntu 22.04, Linux x86_64.
- Python 3.10.12.
- Cloudberry 3.0.0-devel / PostgreSQL 16.9, with assertions enabled.
- Server source commit:
070d9d33b3bacea45d991f54c100b4bc077c8d58.
Possible cause to investigate: StatementTimeoutHandler signals both the backend process group and the backend PID, while PLy_handle_cancel_interrupt queues KeyboardInterrupt through Py_AddPendingCall. Repeated cancellation may interrupt cleanup. This is a hypothesis, not a confirmed root cause.
Are you willing to submit PR?
- Yes, I am willing to submit a PR!
Code of Conduct
- I agree to follow this project's Code of Conduct.
- Ngôn ngữ chính
- C
- Star
- 1.4k
- Fork
- 265
- Merge trung bình
- 3 ngày 17 giờ
- Pull request đã merge (30 ngày)
- 68
Chuẩn bị môi trường
- Không có Dockerfile hay tệp Docker Compose
- Có mẫu pull request
- Đọc hướng dẫn đóng góp
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của apache/cloudberry
-
[Bug] Expand fails to recognize user-defined tablespacesCó thể đã có người làm @nix-oss đã nhận 73 ngày trước. Đang mởtype: Bug
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 76/100
apache/cloudberry#1885 · 2 reaction ·
Maintainer thường phản hồi trong vòng 2 ngày
-
gpexpand first stage fails: 'SyncPackages' object has no attribute 'ret' (extension sync never runs; regression)Có thể đã có người làm @talmacschen-arch đã nhận 134 ngày trước. Đang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 86/100
apache/cloudberry#1825 ·
Maintainer thường phản hồi trong vòng 2 ngày
-
[Bug] GPORCA: “could not find MotionState” for correlated EXISTS with LIMIT and a scalar subqueryCó thể đã có người làm @Alena0704 đã nhận 1 ngày trước. Đang mởtype: Bug
apache/cloudberry#2221 · 1 người được giao ·
Maintainer thường phản hồi trong vòng 2 ngày
-
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 42/100
apache/cloudberry#2214 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 2 ngày
-
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100
apache/cloudberry#2213 · 4 bình luận ·
Maintainer thường phản hồi trong vòng 2 ngày
Tất cả issue của apache/cloudberry
Issue tương tự
-
GPU-UNLOCK RTX 4070 (2786) Gigabyte 1458:416C: cold boot AND warm reboot unlock, Ubuntu 26.04Đang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 62/100
JustAResearcher/gpu-unlock-ada#124 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 62/100
-
inflate: total_in uses plain += on c_ulong (32-bit on Windows), panics in debug for streams > 4 GiBĐang mở
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 85/100
trifectatechfoundation/zlib-rs#570 · 1 bình luận ·
-
ci: mingw64 cross-compile fails on ubuntu-26.04 because Wine 10 drops /usr/lib/wine/wine64Có thể đã có người làm @hyoklee đã nhận hôm nay. Đang mởComponent - Testing
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 85/100
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100
Maintainer thường phản hồi trong vòng 1 ngày