terraphim_rlm: require a per-sub-result verification plan (recheck / control / independent route)
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 4/5
- Tiempo estimado
- 3-5 días
- Aptitud para principiantes
- 48/100
- Tipo de issue
- Nueva funcionalidad
- Claridad
- Bien especificado
- Estado de actividad
- Activo
- Stack tecnológico
- rust
- Área
- ai, testing-qa
Línea de trabajo
Start with the RLM design doc and the rlm_* sub-call result definitions, then inspect the RLM test suite and executor paths. Done means the design states the verification requirement, results carry the accepted verified_by values with gated refusal of none, and a control test fails when execution is skipped or silently falls back.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
Proposal
Make a verification plan for each sub-result a design requirement for terraphim_rlm decompositions. Decomposition alone does not make a long recursive run trustworthy. Every sub-call that produces a result the parent relies on should declare how that result is checked, for example:
- an exact or deterministic re-check (a recomputation, test, schema or invariant);
- a known-answer control instance run through the same path;
- an independent second route, where it is cheap.
Why
The nine-loop computation (Anthropic, 2026-09-25) is a budget-bounded, decomposable, long-running job of exactly the kind RLM targets. The result was trusted because of its checks, not because of the run itself: an eight-loop control checked against the published value, exact arithmetic modulo several primes, and a cross-check between two representations. The open bugs #3405 (the Firecracker stub reports exit 0 when no VM ran) and #3406 (silent fallback to LocalExecutor) are the failure class this guards against. A sandbox that reports success when nothing ran passes every check except a known-answer control.
Acceptance
- The RLM design doc states the requirement.
rlm_*sub-call results carry averified_byfield:none,recheck,controlorindependent. The parent can refuse results markednonefor gated outputs.- At least one control instance in the RLM test suite fails loudly when the executor does not actually run code (covers #3405 and #3406).
Mirror of Gitea terraphim/terraphim-ai# (source of truth).
- Lenguaje dominante
- Rust
- Estrellas
- 65
- Forks
- 5
- Merge medio
- 1 h 17 min
- PR fusionados (30 d)
- 2
Preparar el entorno
- Sin Dockerfile ni archivo de Docker Compose
- Tiene una plantilla de pull request
- Leer la guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de terraphim/terraphim-ai
-
Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100
terraphim/terraphim-ai#968 · 1 comentario ·
-
Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100
terraphim/terraphim-ai#967 ·
-
Dificultad 4/5 3-5 días Aptitud para principiantes 48/100
terraphim/terraphim-ai#966 ·
-
Dificultad 5/5 Más de una semana Aptitud para principiantes 30/100
terraphim/terraphim-ai#965 · 2 comentarios ·
-
Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100
terraphim/terraphim-ai#885 ·
Todos los issues de terraphim/terraphim-ai
Issues similares
-
agent/sec-check hive/hive-school-tunaos security
Dificultad 2/5 1-3 horas Aptitud para principiantes 90/100
Los mantenedores suelen responder en 1 día
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 90/100
Sovereign-Labs/sovereign-sdk#3070 ·
-
Accepts Invalid URLAbiertobug
Dificultad 2/5 1-3 horas Aptitud para principiantes 66/100
Los mantenedores suelen responder en 1 día
-
area:prove bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 82/100
Chelis-Lang/chelis#3317 ·
Los mantenedores suelen responder en 1 día
-
[macOS Desktop] New sidebar hover navigation accidentally switches sections while reaching a chatAbiertoapp bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 70/100
Los mantenedores suelen responder en 1 día