screener 误报:同批 17 条常规技术 issue 中 5 条长文被判「越权诱导」跳过,唯一通过的是最短那条
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 4/5
- Thời gian dự kiến
- 3-5 ngày
- Mức phù hợp với người mới
- 32/100
- Loại issue
- Lỗi
- Độ rõ ràng
- Khá rõ ràng
- Mức độ hoạt động
- Sôi nổi
- Công nghệ
- python
- Lĩnh vực
- ai-infra-agents
Hướng nghiên cứu
The payload never names the screener module, so start by grepping the Python sources for the flag text '疑似指令注入或越权诱导' and the code path that feeds issue bodies into the classifier. Reproduce with the gh issue view loop in the reproduction section, comparing flagged #59 (docs path drift, ~3.9k chars) against claimed #67 (~2.1k chars). The root cause is explicitly unverified and the thread offers three alternative fixes, so agree with maintainers on scope before coding; done means those technical issues classify normally and a test pins the behaviour.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
现象
recursive-agent 的 source 上,同一批 17 条 issue(同一作者 okguitar、同一种写法、同一天提交)被 screener 处理的结果高度不一致:5 条被判定「疑似指令注入或越权诱导」跳过,1 条正常认领。
| recursive issue | 长度(chars) | screener 判定 |
|---|---|---|
| #52 | 4934 | ⚠️ FLAGGED |
| #53 | 4301 | ⚠️ FLAGGED |
| #54 | 3262 | ⚠️ FLAGGED |
| #59 | 3895 | ⚠️ FLAGGED |
| #65 | 3487 | ⚠️ FLAGGED |
| #67 | 2092 | ✅ CLAIMED |
| (其余 11 条) | 2462–7168 | 尚未处理 |
观察到的相关性:被跳过的全是「长文」,唯一被认领的是最短的那条。
为什么判定是误报
这批 issue 是针对 recursive 代码库的常规技术缺陷报告,格式与仓库里既有的
agent 提的 issue 完全一致(## Summary / 证据小节带 path:line / ## Suggested fix / ## Acceptance),
内容全部指向公开仓库里的公开代码。
最清楚的误报是 #59:它讲的是文档路径漂移 —— docs/architecture/overview.md 里写了
src/cli/ 和 src/tui/ 两个已不存在的目录。这条 issue:
- 不含凭证、不含网络访问、不涉及权限或提权;
- 唯一的动作是「把文档里的旧路径改成新路径」;
- 却仍被判为「越权诱导」。
按这个结果,任何篇幅较长的正常技术 issue 都可能被跳过 —— 这对「让 agent 处理 issue」
这个核心用法是致命的:越是有价值的、描述详细的缺陷报告(通常较长),越容易被拦。
影响
这 5 条里有 3 条是阻塞级(recursive-agent 的 C 端形态就绪项):
- #52 是 tracking issue(系列总览 + 验收判据)
- #53 是整条因果链的根因
- #65 是「无 fs / 无 shell」工具面能否强制保证的唯一开关
它们被跳过 ⇒ 自动管线无法处理 ⇒ 只能靠人工介入,而 screener 本该是做减负的。
猜测(未验证)
长度可能是一个因素:screener 或许把「大量祈使句 + 编号步骤 + 代码块」误读成
「在指示 agent 做事」。上面 5 条的 ## Suggested fix 都带编号的祈使步骤,
而通过的那条最短、祈使句也最少。
但这只是猜测 —— 也可能是别的原因(关键词、结构、或单纯的 LLM 判定噪声)。
希望得到的
任选其一即可:
- 放宽 screener:对「公开仓库 + 公开代码路径 + 可复现命令」这类技术内容提高容忍度;
或者把判定从「是否含指令」改成「是否诱导越权/外发敏感信息」这类更具体的行为。 - 告诉我们约束:如果确实有一条可遵守的写法规则(长度上限?避免祈使句?避免某类代码块?),
请写明 —— 我们会照着调整后续 issue 的写法。 - 加一个逃生口:例如
<!-- issue-keeper:review -->之类的 marker,
让人明确标注「这条请人工过目」而不必反复被跳过。
复现
# 5 条被跳过
for n in 52 53 54 59 65; do
gh issue view $n --repo jeffkit/recursive --json comments \
--jq '.comments[] | select(.author.login=="jeffkit") | .body' | head -2
done
# 1 条被认领
gh issue view 67 --repo jeffkit/recursive --json comments \
--jq '.comments[] | select(.author.login=="jeffkit") | .body'
- Ngôn ngữ chính
- Python
- Star
- 0
- Fork
- 0
- Chỉ số merge pull request
- Không có pull request nào được merge trong 30 ngày
Chuẩn bị môi trường
Dự án này không cung cấp dev container, Dockerfile hay hướng dẫn đóng góp, nên bạn cần tự thiết lập môi trường: hãy bắt đầu từ README và xem hướng dẫn đóng góp lần đầu của chúng tôi để biết các bước chung.
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của jeffkit/issue-keeper
-
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 15/100
jeffkit/issue-keeper#22 · 3 bình luận ·
-
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100
jeffkit/issue-keeper#21 · 3 bình luận ·
-
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 58/100
jeffkit/issue-keeper#19 · 1 bình luận ·
-
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 48/100
jeffkit/issue-keeper#17 · 6 bình luận ·
-
keeper-ignore
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 20/100
jeffkit/issue-keeper#16 · 2 bình luận ·
Tất cả issue của jeffkit/issue-keeper
Issue tương tự
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
UKGovernmentBEIS/optstop#10 ·
-
maintenance
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100
pollen-robotics/reachy_mini#1508 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
[BUG] `cloud-keys.env` values retain enclosing quotes causing 401 Unauthorized, and missing utf-8 encoding crashes on WindowsCó thể đã có người làm @divyanshu07-code đã nhận hôm nay. Đang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 77/100
open-jarvis/OpenJarvis#1192 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 2 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
sylvainmetayer/homelab#851 ·
Maintainer thường phản hồi trong vòng 1 ngày