Owner
comet-ml
已索引 2 个仓库 · 在 GitHub 查看
-
opik
Debug, evaluate, and monitor your LLM applications, RAG systems, and agentic workflows with comprehensive tracing, automated evaluations,...
Python · 22375 个 star
-
opik-examples
Examples and demos for Opik, the open-source LLM observability and evaluation platform, built by Comet.
Python · 8 个 star
可能已有人在做的 issue 排在最后。 全部按时间排序
-
[Bug]: Streamed Gemini traces lose function calls and text in the TypeScript SDK可能重新可做 关联的 PR 已关闭且未合并。 未关闭
难度 3/5 1-2 天 新手友好度 42/100
comet-ml/opik#9090 · 2 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
[Bug]: Streamed Gemini traces lose function calls (and text next to them)可能重新可做 关联的 PR 已关闭且未合并。 未关闭
难度 2/5 1-3 小时 新手友好度 70/100
comet-ml/opik#9069 · 1 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
难度 5/5 一周以上 新手友好度 1/100
comet-ml/opik#9063 · 1 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
Escalated request
难度 3/5 1-2 天 新手友好度 78/100
comet-ml/opik#8564 · 1 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
Evaluation pipeline: failed metrics silently dropped from averages; SUT output unescaped in judge prompts; g_eval logprob scoring misparses digit tokens; error handler imports SDKs inside except block可能重新可做 @feiiiiii5 于 48 天前认领，目前没有进行中的 PR。 未关闭
难度 4/5 3-5 天 新手友好度 48/100
comet-ml/opik#8134 · 8 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
[Bug]: Bulk span update does not recalculate total_estimated_cost when model/provider/usage change可能重新可做 关联的 PR 已关闭且未合并。 未关闭
难度 3/5 1-2 天 新手友好度 35/100
comet-ml/opik#8098 · 2 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
Escalated request
难度 5/5 一周以上 新手友好度 32/100
comet-ml/opik#7903 · 2 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
enhancement Escalated request
难度 4/5 3-5 天 新手友好度 48/100
comet-ml/opik#7893 · 1 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
难度 4/5 3-5 天 新手友好度 48/100
comet-ml/opik#7856 · 3 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
[FR]: Use span provider hint to order heuristics rather than only using fixed registry.ts order可能重新可做 @yaodong-shen 于 85 天前认领，目前没有进行中的 PR。 未关闭enhancement
难度 4/5 3-5 天 新手友好度 40/100
comet-ml/opik#7658 · 2 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
[FR]: "Hide All But Last N Messages" metadata可能重新可做 关联的 PR 已关闭且未合并。 未关闭enhancement Escalated-request
难度 4/5 3-5 天 新手友好度 30/100
comet-ml/opik#7594 · 3 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
[Bug]: Cost overcounted when trace_id values shared between projects可能重新可做 关联的 PR 已关闭且未合并。 未关闭
难度 4/5 3-5 天 新手友好度 25/100
comet-ml/opik#7473 · 6 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
enhancement Escalated-request
难度 5/5 一周以上 新手友好度 12/100
comet-ml/opik#7168 · 4 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
Escalated-request
难度 4/5 3-5 天 新手友好度 20/100
comet-ml/opik#7090 · 3 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
Escalated-request Feature_Request
难度 5/5 一周以上 新手友好度 42/100
维护者通常 1 天内回复
-
enhancement Escalated-request
难度 5/5 一周以上 新手友好度 25/100
维护者通常 1 天内回复
-
enhancement
难度 5/5 一周以上 新手友好度 35/100
维护者通常 1 天内回复
-
[FR]: Whitelist/blacklist for group by tags in new dashboard widget可能重新可做 关联的 PR 已关闭且未合并。 未关闭enhancement JC
难度 4/5 3-5 天 新手友好度 45/100
comet-ml/opik#6182 · 3 条评论 · 2 个 reaction ·
维护者通常 1 天内回复
-
Escalated-request
难度 4/5 3-5 天 新手友好度 25/100
维护者通常 1 天内回复
-
enhancement
难度 5/5 一周以上 新手友好度 35/100
维护者通常 1 天内回复
-
[Bug]: ClickHouse migrations fail on managed services due to hardcoded '{cluster}' macro可能重新可做 关联的 PR 已关闭且未合并。 未关闭
难度 3/5 1-2 天 新手友好度 42/100
维护者通常 1 天内回复
-
Escalated-request JC Question
难度 4/5 3-5 天 新手友好度 28/100
维护者通常 1 天内回复
-
enhancement
难度 4/5 3-5 天 新手友好度 18/100
维护者通常 1 天内回复
-
[Bug]: Tool call spans from `logfire.instrument_httpx(capture_all=True)` shown as `general` instead `tool`可能重新可做 关联的 PR 已关闭且未合并。 未关闭JC
难度 4/5 3-5 天 新手友好度 32/100
维护者通常 1 天内回复
-
enhancement Escalated-request JC
难度 4/5 3-5 天 新手友好度 48/100
维护者通常 1 天内回复
-
[Bug]: Unable to change throttling and maximum concurrent request in LLM-as-judge online evaluation可能重新可做 关联的 PR 已关闭且未合并。 未关闭Bug Escalated-request JC
难度 3/5 1-2 天 新手友好度 50/100
维护者通常 1 天内回复
-
[Bug]: Table default.DATABASECHANGELOG does not exist. Maybe you meant default.DATABASECHANGELOG1可能重新可做 @JetoPistola 于 35 天前认领，目前没有进行中的 PR。 未关闭JC
comet-ml/opik#5014 · 4 条评论 · 已指派 1 人 ·
维护者通常 1 天内回复
-
[FR]: ability to filter on span.error_info.traceback values可能重新可做 关联的 PR 已关闭且未合并。 未关闭enhancement JC
难度 4/5 3-5 天 新手友好度 35/100
维护者通常 1 天内回复
-
[FR]: Prompt type selector when creating a new prompt in the library可能重新可做 关联的 PR 已关闭且未合并。 未关闭enhancement Escalated-request
难度 3/5 1-2 天 新手友好度 28/100
维护者通常 1 天内回复
-
enhancement Escalated-request
难度 4/5 3-5 天 新手友好度 35/100
维护者通常 1 天内回复
-
enhancement JC
难度 5/5 一周以上 新手友好度 35/100
维护者通常 1 天内回复
-
enhancement Escalated-request
难度 5/5 一周以上 新手友好度 12/100
comet-ml/opik#4902 · 2 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
[FR]: Add an icon to span/trace indicating that it contains an attachment可能重新可做 关联的 PR 已关闭且未合并。 未关闭enhancement Feature_Request Frontend
难度 4/5 3-5 天 新手友好度 20/100
维护者通常 1 天内回复
-
[FR]: prompt folder可能重新可做 @Nimrod007 于 281 天前认领，目前没有进行中的 PR。 未关闭enhancement Feature_Request
comet-ml/opik#4724 · 4 条评论 · 1 个 reaction · 已指派 1 人 ·
维护者通常 1 天内回复
-
breaking-change dependencies enhancement JC Python-SDK
难度 4/5 3-5 天 新手友好度 32/100
comet-ml/opik#4633 · 9 条评论 · 2 个 reaction ·
维护者通常 1 天内回复
-
[FR]: Add Support for `gemini-2.5-flash-image` Model可能重新可做 @AndreiCautisanu 于 285 天前认领，目前没有进行中的 PR。 未关闭JC
comet-ml/opik#4607 · 3 条评论 · 1 个 reaction · 已指派 1 人 ·
维护者通常 1 天内回复
-
Escalated-request
难度 5/5 一周以上 新手友好度 30/100
维护者通常 1 天内回复
-
[Bug]: Unable to run on the Clickhouse Cloud可能重新可做 关联的 PR 已关闭且未合并。 未关闭Question
难度 4/5 3-5 天 新手友好度 35/100
维护者通常 1 天内回复
-
Feature_Request Frontend JC
难度 5/5 一周以上 新手友好度 15/100
维护者通常 1 天内回复
-
[FR]: Add preview for CSV files可能重新可做 @Kaif-Imteyaz 于 377 天前认领，目前没有进行中的 PR。 未关闭improvement
难度 3/5 1-2 天 新手友好度 40/100
维护者通常 1 天内回复
-
[FR]: Allow pinning columns & inline attachment previews in main view可能重新可做 @JetoPistola 于 35 天前认领，目前没有进行中的 PR。 未关闭Backend Feature_Request Frontend JC
comet-ml/opik#2814 · 4 条评论 · 已指派 3 人 ·
维护者通常 1 天内回复
-
Question
难度 4/5 3-5 天 新手友好度 35/100
维护者通常 1 天内回复
-
Backend Escalated-request Feature_Request Frontend
难度 5/5 一周以上 新手友好度 25/100
comet-ml/opik#2106 · 1 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
Backend Feature_Request Frontend Planned
难度 3/5 1-2 天 新手友好度 30/100
维护者通常 1 天内回复
-
[FR]: Bar chart (categorical) score metric e.g. "low", "medium", "high"可能重新可做 @aadereiko 于 597 天前认领，目前没有进行中的 PR。 未关闭Backend Escalated-request Feature_Request Frontend
comet-ml/opik#1436 · 3 条评论 · 已指派 1 人 ·
维护者通常 1 天内回复
-
[FR]: See source code in traces可能重新可做 关联的 PR 已关闭且未合并。 未关闭Feature_Request JC Planned
难度 5/5 一周以上 新手友好度 20/100
comet-ml/opik#1229 · 5 条评论 · 2 个 reaction ·
维护者通常 1 天内回复
-
Feature_Request JC Planned
难度 3/5 1-2 天 新手友好度 35/100
维护者通常 1 天内回复
-
[FR]: "Run/Evaluate - Compare - Edit Prompt" UI loop可能重新可做 关联的 PR 已关闭且未合并。 未关闭Feature_Request JC
难度 5/5 一周以上 新手友好度 25/100
维护者通常 1 天内回复
-
[Bug]: Streamed tool calls missing from track_litellm traces可能已有人在做 @pcbeingused333 于 1 天前认领。 未关闭
难度 2/5 1-3 小时 新手友好度 73/100
comet-ml/opik#9089 · 2 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
[Bug]: run_simulation(project_name=...) logs traces to the default project可能已有人在做 @quetion667 于 1 天前认领。 未关闭
难度 2/5 1-3 小时 新手友好度 25/100
comet-ml/opik#9080 · 2 条评论 · 1 个 reaction ·
维护者通常 1 天内回复