ggml-org/whisper.cpp

Should we use process time for benchmarks/timings?

開放

#382 建立於 2023年1月7日

在 GitHub 查看貢獻者指南
 (2 則留言) (0 個反應) (0 位負責人)C++ (6,074 個分叉)batch import
enhancementgood first issue

倉庫指標

星標
 (52,968 顆星)
PR 合併指標
 (平均合併 5天 20小時) (30 天內合併 36 個 PR)

描述

Currently, the bench tool simply spits out the timings from whisper_print_timings. These timings are not process specific and as such are influenced by other processes on the system.

Should we use something like CLOCK_PROCESS_CPUTIME_ID instead of CLOCK_MONOTONIC in ggml_time_*? This would make the benchmarks in #89 outdated, but would make future benchmarks more realistic.

貢獻者指南

研究方向
調查當前在 ggml time * 函數中使用 CLOCK MONOTONIC 的情況，並與 CLOCK PROCESS CPUTIME ID 進行比較，評估對基準測試準確性的影響。考慮平台相容性和執行緒安全性。
技術棧
cpp
領域
performance
議題類型
調研
難度面向新貢獻者的預計實作難度，1 表示很小改動，5 表示專家級工作。
2
預計時間有經驗貢獻者完成調查、實作、測試並準備 pull request 的粗略時間範圍。
1-3 小時
活動狀態議題目前的可參與程度：新鮮、活躍、陳舊、阻塞或等待維護者輸入。
活躍
清晰度議題是否清楚說明預期改動、驗收標準和下一步。
清晰
前置要求
無
新手友善度1-100 的估計分數，表示該議題對首次貢獻者的友善程度。
75