how to get the evaluation result of gemma4?
まだ誰も着手していません。
評価
- 難易度
- 3/5
- 見積もり時間
- 1〜2日
- 初心者へのやさしさ
- 55/100
- issue の種類
- ドキュメント
- 明瞭さ
- おおむね明確
- 活発さ
- 活発
- 技術スタック
- jupyter-notebook, python
調査の方向性
Look for evaluation scripts or notebooks in the repository, likely under an 'eval' or 'benchmarks' directory. Check the README for instructions on running evaluations. Compare the output format with the leaderboard image to understand the discrepancy. Running the evaluation on Gemma4 and verifying the results against the paper will confirm the process.
索引モデルが issue の本文から書いたものです。
説明
I find that the evaluation result of gemme4 is different from the paper, Could you please share how to evaluate gemma4?
paper:
here:
from leader board
- 主要言語
- Jupyter Notebook
- スター
- 11.1k
- フォーク
- 766
- 平均マージ
- 5時間 3分
- マージ済み PR（30日）
- 6
環境構築
このプロジェクトの環境構築ファイルはまだ確認していません。まず README を読み、一般的な手順ははじめてのコントリビューションガイドを参照してください。
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
OpenBMB/MiniCPM のほかの issue
-
難易度 1/5 1時間未満 初心者へのやさしさ 78/100
-
難易度 5/5 1週間以上 初心者へのやさしさ 15/100
-
feature
難易度 4/5 3〜5日 初心者へのやさしさ 35/100
-
難易度 3/5 1〜2日 初心者へのやさしさ 62/100
-
難易度 5/5 1週間以上 初心者へのやさしさ 25/100
OpenBMB/MiniCPM の issue をすべて見る
似ている issue
-
area:ai-suggestions bug good first issue P2
難易度 2/5 1〜3時間 初心者へのやさしさ 84/100
uttrflow/uttrflow-swift#1922 ·
メンテナーはふだん 1 日以内に返信
-
bug
難易度 2/5 1〜3時間 初心者へのやさしさ 78/100
メンテナーはふだん 1 日以内に返信
-
triage/confirmed
難易度 2/5 1〜3時間 初心者へのやさしさ 86/100
agentscope-ai/agentscope#2876 ·
メンテナーはふだん 1 日以内に返信
-
Docs never explain image replay cost with native-vision models or the tools.media.models[] opt-outオープンclawsweeper:linked-pr-open clawsweeper:no-new-fix-pr impact:ux-friction issue-rating: 🌊 off-meta tidepool P2
難易度 2/5 1〜3時間 初心者へのやさしさ 88/100
openclaw/openclaw#159202 · コメント 1 件 · リアクション 1 件 ·
メンテナーはふだん 1 日以内に返信
-
comp/tools P2 tool/delegate type/bug
難易度 2/5 1〜3時間 初心者へのやさしさ 78/100
NousResearch/hermes-agent#124460 ·
メンテナーはふだん 1 日以内に返信