Evaluation: Add latency metric
維護者通常 1 天內回覆
@AkhileshNegi 已經在處理了。
開始於 2026年7月10日。
評估
這個 Issue 還沒有評估資料。
描述
Is your feature request related to a problem?
We lack important metrics like latency for fast evaluations, which impacts decision-making processes. The absence of these metrics can lead to suboptimal choices.
Describe the solution you'd like
- Add latency as a metric for fast evaluations
- Note that cost metrics have already been added
Original issue
- Latency as metric to add for Fast evals
- Cost is already added
- 主要語言
- Python
- 星號
- 18
- 分支
- 11
- 平均合併
- 1 天 21 小時
- 30 天內合併 PR
- 32
環境準備
- 提供 Dockerfile 或 Docker Compose 檔案
- 有 Pull Request 範本
- 閱讀貢獻指南
從這裡開始
- 先讀完整個 Issue，再讀專案的貢獻指南。
- 在 Issue 下留言說明你要接手 —— 這能避免兩個人做同樣的事。
- Fork 儲存庫，在一個分支上完成修改。
- 送出 Pull Request，並在描述裡引用這個 Issue 編號。
ProjectTech4DevAI/kaapi-backend 的其他 Issue
-
bug
難度 2/5 1-3 小時 新手友好度 68/100
ProjectTech4DevAI/kaapi-backend#889 ·
維護者通常 1 天內回覆
-
Otel: Standardize key constants可能已有人在做 @vprashrex 於 1 天前認領。 未關閉
ProjectTech4DevAI/kaapi-backend#1294 · 已指派 1 人 ·
維護者通常 1 天內回覆
-
ECS: Automate task definition creation可能已有人在做 @Ayush8923 於 1 天前認領。 未關閉infrastructure
ProjectTech4DevAI/kaapi-backend#1293 · 已指派 1 人 ·
維護者通常 1 天內回覆
-
Chabot: Server-side chatbot state management可能已有人在做 @Ayush8923 於 1 天前認領。 未關閉
ProjectTech4DevAI/kaapi-backend#1278 · 已指派 1 人 ·
維護者通常 1 天內回覆
-
Models: Update default provider models可能已有人在做 @Prajna1999 於 3 天前認領。 未關閉
ProjectTech4DevAI/kaapi-backend#1272 · 已指派 1 人 ·
維護者通常 1 天內回覆
查看 ProjectTech4DevAI/kaapi-backend 的全部 Issue
相似的 Issue
-
[Bug]: IndexHandler.post crashes with HTTP 500 on malformed payloads, missing credentials, or when login is disabled可能已有人在做 關聯的 PR 仍在進行中或已合併。 未關閉
難度 2/5 1-3 小時 新手友好度 78/100
維護者通常 6 天內回覆
-
github_actions
難度 2/5 1-3 小時 新手友好度 65/100
collective/icalendar#2003 · 1 則留言 ·
維護者通常 1 天內回覆
-
bug
難度 2/5 1-3 小時 新手友好度 79/100
-
難度 2/5 1-3 小時 新手友好度 68/100
openzim/python-scraperlib#360 ·
維護者通常 1 天內回覆
-
難度 2/5 1-3 小時 新手友好度 82/100
volcengine/OpenViking#6445 ·
維護者通常 1 天內回覆