[PIR][WP25] AI4AI-Bench (arXiv:2608.20318) recursive-improvement benchmark adapter (ADR-328)
维护者通常 3 天内回复
还没有人认领这个 Issue。
评估
- 难度
- 4/5
- 预计耗时
- 3-5 天
- 新手友好度
- 48/100
- Issue 类型
- 功能
- 描述清晰度
- 基本清楚
- 活跃度
- 活跃
- 技术栈
- typescript
调研方向
先阅读 docs/adr/ADR-328-ai4ai-bench-recursive-improvement-adapter.md 和 Wave 4 计划，然后跟踪 RuvectorFlywheelOptions、RuvectorGepaOptions、runControlledBenchmark 和 flywheel.ts 中的基准测试衔接点。完成标准是具备一个固定版本的 AI4AI-Bench 适配器、在受控子进程中执行、契约测试，以及至少运行一次 smoke 规模的任务；官方 B300 运行仍由用户执行。
由索引模型根据 Issue 内容生成。
描述
Part of PIR Wave 4 — epic #837.
Add an AI4AI-Bench adapter behind the harness's constructor-injected benchmark seam (RuvectorFlywheelOptions.benchmark / RuvectorGepaOptions.benchmark / runControlledBenchmark runner param), adapting the released Apache-2.0 suite (github.com/Einsia/AI4AI-Bench). Contained-subprocess execution only; suite pinning; the flywheel.ts research-artifact-emission restriction stays intact. Deliverable: adapter + contract tests + at least one smoke-scale task run (acceptance-test clause 1). Official-scale B300 runs are USER ACTION.
- Evidence grade & artifact availability:
docs/research/perpetual-intelligence-runtime/10-wave4-evidence-review.md(PR #892) - WP/ADR mapping, phases, and security gates:
docs/research/perpetual-intelligence-runtime/11-wave4-program-plan.md(PR #892) - ADR:
docs/adr/ADR-328-ai4ai-bench-recursive-improvement-adapter.md
Depends on: WP2 (promotion pipeline), WP21 (external-grounding veto registration).
- 主要语言
- Rust
- 星标
- 4.6k
- 派生
- 621
- 平均合并
- 2 天 20 小时
- 30 天内合并 PR
- 37
环境准备
这个项目没有提供开发容器、Dockerfile 或贡献指南，环境需要你自己搭建：先看它的 README，通用步骤见我们的新手贡献指南。
从这里开始
- 先读完整个 Issue，再读项目的贡献指南。
- 在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
- Fork 仓库，在一个分支上完成修改。
- 提交 Pull Request，并在描述里引用这个 Issue 编号。
ruvnet/RuVector 的其他 Issue
-
难度 2/5 1-3 小时 新手友好度 71/100
ruvnet/RuVector#1179 · 1 条评论 ·
维护者通常 3 天内回复
-
documentation
难度 2/5 1-3 小时 新手友好度 76/100
维护者通常 3 天内回复
-
RVF SDK: deleteByFilter omits required native filter fields可能已有人在做 @rudycelekli 于 30 天前认领。 未关闭
难度 2/5 1-3 小时 新手友好度 78/100
维护者通常 3 天内回复
-
RVF SDK: WASM queries override the configured metric with L2可能已有人在做 @rudycelekli 于 30 天前认领。 未关闭
难度 2/5 1-3 小时 新手友好度 76/100
维护者通常 3 天内回复
-
`rvf-manifest` pulls in `std` transitively via `crc32c`可能已有人在做 @rudycelekli 于 32 天前认领。 未关闭
难度 2/5 1-3 小时 新手友好度 76/100
维护者通常 3 天内回复
相似的 Issue
-
good first issue help wanted
难度 2/5 1-3 小时 新手友好度 72/100
servo/rust-smallvec#827 ·
维护者通常 1 天内回复
-
难度 2/5 1-3 小时 新手友好度 72/100
nowledge-co/hawdb#1400 ·
维护者通常 1 天内回复
-
难度 2/5 1-3 小时 新手友好度 62/100
calcit-lang/caps#16 ·
-
难度 2/5 1-3 小时 新手友好度 85/100
penso/herdr-gpui#934 ·
维护者通常 1 天内回复
-
🎉 Add Bossanova未关闭
难度 2/5 1-3 小时 新手友好度 70/100
jaywcjlove/awesome-mac#4096 ·
维护者通常 1 天内回复