[Research] 受控 RSI 外循环:候选生成、沙箱评测、审核晋升与回滚

Abierto
#32 0 comentarios 0 reacciones 0 asignados Ver en GitHub

Nadie ha tomado este issue todavía.

Evaluación

Dificultad
5/5
Tiempo estimado
Más de una semana
Aptitud para principiantes
35/100
Tipo de issue
Nueva funcionalidad
Claridad
Bastante claro
Estado de actividad
Activo
Stack tecnológico
electron, typescript

Línea de trabajo

Read packages/shared/src/evaluation/experiment-service.ts first, then inspect packages/shared/src/agent and packages/pi-extension/src/index.ts to understand the existing evaluation and agent entry points. Start with offline candidate artifact evaluation and manual promotion, using issues #28, #13, and #20 to understand dependencies. Done means the proposed acceptance criteria and adversarial validation cases are addressed; the proposal does not specify concrete test file names or commands.

Escrito por el modelo de indexación a partir del texto del issue.

Descripción

area:harness enhancement help wanted priority:later status:research type:research

状态:研究提案,尚未验证效果。阶段:R1 · Harness² × RSI Research。总路线:#8;当前能力:#9。

目标与价值

把传统递归自我改进作为工程化研究闭环:可改进对象是版本化 prompt、skill、hook、工作流或配置。暂不涉及模型权重训练,也不允许未经审核改写生产运行环境。

验收标准

  • 定义候选 artifact、父版本、变更理由、适用范围和最大递归深度
  • 沙箱隔离凭证/网络/文件权限,候选不能改变自己的评测规则或扩大权限
  • 晋升需要固定留出集、回归检查、人工审核与版本记录
  • 提供熔断、预算上限和一键回滚;用户记忆不能被候选静默改写

验证方法

恶意候选、评分投机、权限扩张、回滚和版本复现测试;对照人工调优及无改进基线。

源码起点

以上是已有实现的阅读入口,不代表拟议能力已实现。

依赖与最小贡献

  • #28 — [Research] 版本化任务轨迹与隔离评测集:为自我改进建立证据基座
  • #13 — [Runtime] 工具副作用日志与重放策略:区分读取、幂等写入和人工确认
  • #20 — [Memory] 经历整合与经验提炼:保留原始证据的分层记忆

先实现候选 artifact 的离线评测与人工晋升,不开放自合并。

参与

认领前先说明拟完成的最小范围,再评论 /claim。提交 PR 时附真实环境、验证命令和结果;仅完成部分时请列出剩余项。贡献入口:#7。

Lenguaje dominante
TypeScript
Estrellas
206
Forks
37
Merge medio
7 h 8 min
PR fusionados (30 d)
8

Preparar el entorno

Primeros pasos

  1. Lee el issue completo y luego la guía de contribución del proyecto.
  2. Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
  3. Haz un fork del repositorio y trabaja en una rama.
  4. Abre un pull request que haga referencia al número del issue.

Más de ydflow/Trail

Todos los issues de ydflow/Trail

Issues similares

Más issues de TypeScript

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.