Measure trycua/cua oracle gateability on this tree (cua-s1-forms port)
メンテナーはふだん 1 日以内に返信
まだ誰も着手していません。
評価
- 難易度
- 4/5
- 見積もり時間
- 3〜5日
- 初心者へのやさしさ
- 45/100
- issue の種類
- 機能追加
- 明瞭さ
- おおむね明確
- 活発さ
- 活発
調査の方向性
The task involves running the TinyTransformerScorer from the pinned trycua/cua commit and the local CuaS1ScoreInference on the cua-s1-forms checkpoint. Start by examining .agents/oracles/cua.md for the exact commit and checkpoint details. Look for existing inference scripts or tests related to CuaS1ScoreInference. Run both inference paths on a fixed workload, compare probabilities within 1e-5 tolerance, and update the oracle file's gateable field and evidence. The local record is in row MODEL-CUA-S1-FORMS.
索引モデルが issue の本文から書いたものです。
説明
PR #3265 landed the cua-s1-forms port (TinyTransformerScorer, 706K params, f32) with .agents/oracles/cua.md pinned at trycua/cua 9bbfa7dd3e27ca7f1861ede70aaca390174493f9 and gateable = no, but the oracle has never been RUN against this tree — the pin was verified via the GitHub API only, so it carries no gate authority (AGENTS.md: an oracle is only gateable once it demonstrably builds and runs the model).
This issue owns that measurement and is the #N the oracle file's evidence field must cite:
- Build/run the Laya-Python-equivalent reference path: execute the pinned
trycua/cuaTinyTransformerScorer+ByteCollatorinference on the publishedcua-s1-formscheckpoint (2.8 MB, f32) and record outputs on a fixed workload. - Run our
CuaS1ScoreInferenceon the same checkpoint and workload; compare probabilities to the oracle's recorded tolerance (spec: 1e-5). - Record the result in
.agents/oracles/cua.md(gateableyes/no + evidence path) and in the row's records.
Local record: ISSUE-LOCAL-01M32WZMKVRBP4PH21KPHEDS3V (row MODEL-CUA-S1-FORMS).
FOLLOWING_AGENTS_PROTOCOL
Following-Agents-Protocol: true
AI-Assisted: true
Assisted-by: AGENT:regolo/glm5.2 [maki]
- 主要言語
- C++
- スター
- 440
- フォーク
- 55
- 平均マージ
- 1日 4時間
- マージ済み PR（30日）
- 366
環境構築
- Dockerfile・Docker Compose ファイルなし
- プルリクエストのテンプレートあり
- コントリビューションガイドを読む
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
mudler/vllm.cpp のほかの issue
-
難易度 2/5 1〜3時間 初心者へのやさしさ 84/100
メンテナーはふだん 1 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 82/100
メンテナーはふだん 1 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 70/100
メンテナーはふだん 1 日以内に返信
-
難易度 1/5 1時間未満 初心者へのやさしさ 88/100
メンテナーはふだん 1 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 84/100
メンテナーはふだん 1 日以内に返信
mudler/vllm.cpp の issue をすべて見る
似ている issue
-
難易度 2/5 1〜3時間 初心者へのやさしさ 75/100
mpfaffenberger/privateer_reimagined#658 ·
メンテナーはふだん 1 日以内に返信
-
難易度 1/5 1時間未満 初心者へのやさしさ 85/100
microsoft/onnxruntime#33018 ·
メンテナーはふだん 2 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 82/100
AXERA-TECH/ax-llm#81 ·
-
enhancement
難易度 2/5 半日 初心者へのやさしさ 78/100
ros-industrial/ros2_canopen#448 ·
-
難易度 1/5 1時間未満 初心者へのやさしさ 78/100
メンテナーはふだん 1 日以内に返信