[Research] 受控 RSI 外循环:候选生成、沙箱评测、审核晋升与回滚

Đang mở
#32 0 bình luận 0 reaction 0 người được giao Xem trên GitHub

Chưa có ai nhận issue này.

Đánh giá

Độ khó
5/5
Thời gian dự kiến
Hơn một tuần
Mức phù hợp với người mới
35/100
Loại issue
Tính năng
Độ rõ ràng
Khá rõ ràng
Mức độ hoạt động
Sôi nổi
Công nghệ
electron, typescript

Hướng nghiên cứu

Read packages/shared/src/evaluation/experiment-service.ts first, then inspect packages/shared/src/agent and packages/pi-extension/src/index.ts to understand the existing evaluation and agent entry points. Start with offline candidate artifact evaluation and manual promotion, using issues #28, #13, and #20 to understand dependencies. Done means the proposed acceptance criteria and adversarial validation cases are addressed; the proposal does not specify concrete test file names or commands.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Mô tả

area:harness enhancement help wanted priority:later status:research type:research

状态:研究提案,尚未验证效果。阶段:R1 · Harness² × RSI Research。总路线:#8;当前能力:#9。

目标与价值

把传统递归自我改进作为工程化研究闭环:可改进对象是版本化 prompt、skill、hook、工作流或配置。暂不涉及模型权重训练,也不允许未经审核改写生产运行环境。

验收标准

  • 定义候选 artifact、父版本、变更理由、适用范围和最大递归深度
  • 沙箱隔离凭证/网络/文件权限,候选不能改变自己的评测规则或扩大权限
  • 晋升需要固定留出集、回归检查、人工审核与版本记录
  • 提供熔断、预算上限和一键回滚;用户记忆不能被候选静默改写

验证方法

恶意候选、评分投机、权限扩张、回滚和版本复现测试;对照人工调优及无改进基线。

源码起点

以上是已有实现的阅读入口,不代表拟议能力已实现。

依赖与最小贡献

  • #28 — [Research] 版本化任务轨迹与隔离评测集:为自我改进建立证据基座
  • #13 — [Runtime] 工具副作用日志与重放策略:区分读取、幂等写入和人工确认
  • #20 — [Memory] 经历整合与经验提炼:保留原始证据的分层记忆

先实现候选 artifact 的离线评测与人工晋升,不开放自合并。

参与

认领前先说明拟完成的最小范围,再评论 /claim。提交 PR 时附真实环境、验证命令和结果;仅完成部分时请列出剩余项。贡献入口:#7。

Ngôn ngữ chính
TypeScript
Star
206
Fork
37
Merge trung bình
7 giờ 8 phút
Pull request đã merge (30 ngày)
8

Chuẩn bị môi trường

Bắt đầu từ đâu

  1. Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
  2. Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
  3. Fork repository và làm thay đổi trên một nhánh.
  4. Mở pull request có tham chiếu số hiệu của issue.

Issue khác của ydflow/Trail

Tất cả issue của ydflow/Trail

Issue tương tự

Thêm issue về TypeScript

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.