Owner
comet-ml
1 indexiertes Repository · Auf GitHub ansehen
-
opik
Debug, evaluate, and monitor your LLM applications, RAG systems, and agentic workflows with comprehensive tracing, automated evaluations,...
Python · 22375 Sterne
Issues, an denen vielleicht schon jemand arbeitet, stehen am Ende. Alles nach Datum anzeigen
-
Schwierigkeit 3/5 1-2 Tage Anfängerfreundlichkeit 42/100
comet-ml/opik#9090 · 1 Kommentar · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 73/100
comet-ml/opik#9089 · 1 Kommentar · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 70/100
comet-ml/opik#9069 · 1 Kommentar · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
Dependency DashboardOffen
Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 1/100
comet-ml/opik#9063 · 1 Kommentar · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
LLM monetary costs are recorded with no currency — ingest OTel GenAI gen_ai.usage.cost.currencyOffenEscalated request
Schwierigkeit 3/5 1-2 Tage Anfängerfreundlichkeit 78/100
comet-ml/opik#8564 · 1 Kommentar · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
[Bug]: @track(create_duplicate_root_span=False) and source= are ignored for generator functionsEvtl. wieder frei @aadereiko hat das vor 30 Tagen übernommen, und es ist kein Pull Request offen. OffenEscalated request
comet-ml/opik#8421 · 1 Kommentar · 1 Reaktion · 1 zugewiesene Person ·
Maintainer antworten meist innerhalb von 1 Tag
-
Evaluation pipeline: failed metrics silently dropped from averages; SUT output unescaped in judge prompts; g_eval logprob scoring misparses digit tokens; error handler imports SDKs inside except blockEvtl. wieder frei @feiiiiii5 hat das vor 47 Tagen übernommen, und es ist kein Pull Request offen. Offen
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 48/100
comet-ml/opik#8134 · 8 Kommentare · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
[Bug]: Bulk span update does not recalculate total_estimated_cost when model/provider/usage changeEvtl. wieder frei Ein Pull Request dazu wurde ohne Merge geschlossen. Offen
Schwierigkeit 3/5 1-2 Tage Anfängerfreundlichkeit 35/100
comet-ml/opik#8098 · 2 Kommentare · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
Escalated request
Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 32/100
comet-ml/opik#7903 · 2 Kommentare · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
enhancement Escalated request
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 48/100
comet-ml/opik#7893 · 1 Kommentar · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 48/100
comet-ml/opik#7856 · 3 Kommentare · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
[FR]: Use span provider hint to order heuristics rather than only using fixed registry.ts orderEvtl. wieder frei @yaodong-shen hat das vor 84 Tagen übernommen, und es ist kein Pull Request offen. Offenenhancement
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 40/100
comet-ml/opik#7658 · 2 Kommentare · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
[FR]: "Hide All But Last N Messages" metadataEvtl. wieder frei Ein Pull Request dazu wurde ohne Merge geschlossen. Offenenhancement Escalated-request
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 30/100
comet-ml/opik#7594 · 3 Kommentare · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
[Bug]: Cost overcounted when trace_id values shared between projectsEvtl. wieder frei Ein Pull Request dazu wurde ohne Merge geschlossen. Offen
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 25/100
comet-ml/opik#7473 · 6 Kommentare · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
enhancement Escalated-request
Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 12/100
comet-ml/opik#7168 · 4 Kommentare · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
Escalated-request
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 20/100
comet-ml/opik#7090 · 3 Kommentare · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
Escalated-request Feature_Request
Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 42/100
comet-ml/opik#6726 · 1 Kommentar ·
Maintainer antworten meist innerhalb von 1 Tag
-
Cannot set up thread-level online evaluation rule with a message-count filterEvtl. wieder frei @Nimrod007 hat das vor 168 Tagen übernommen, und es ist kein Pull Request offen. OffenBackend Bug JC
comet-ml/opik#6619 · 1 zugewiesene Person ·
Maintainer antworten meist innerhalb von 1 Tag
-
enhancement Escalated-request
Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 25/100
comet-ml/opik#6403 · 4 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
enhancement
Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 35/100
comet-ml/opik#6231 · 2 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
[FR]: Whitelist/blacklist for group by tags in new dashboard widgetEvtl. wieder frei Ein Pull Request dazu wurde ohne Merge geschlossen. Offenenhancement JC
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 45/100
comet-ml/opik#6182 · 3 Kommentare · 2 Reaktionen ·
Maintainer antworten meist innerhalb von 1 Tag
-
Escalated-request
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 25/100
comet-ml/opik#5870 · 1 Kommentar ·
Maintainer antworten meist innerhalb von 1 Tag
-
enhancement
Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 35/100
comet-ml/opik#5838 · 2 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
[Bug]: ClickHouse migrations fail on managed services due to hardcoded '{cluster}' macroEvtl. wieder frei Ein Pull Request dazu wurde ohne Merge geschlossen. Offen
Schwierigkeit 3/5 1-2 Tage Anfängerfreundlichkeit 42/100
comet-ml/opik#5834 · 1 Kommentar ·
Maintainer antworten meist innerhalb von 1 Tag
-
Escalated-request JC Question
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 28/100
comet-ml/opik#5551 · 4 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
enhancement
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 18/100
comet-ml/opik#5344 · 3 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
[Bug]: Tool call spans from `logfire.instrument_httpx(capture_all=True)` shown as `general` instead `tool`Evtl. wieder frei Ein Pull Request dazu wurde ohne Merge geschlossen. OffenJC
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 32/100
comet-ml/opik#5334 · 4 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
enhancement Escalated-request JC
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 48/100
comet-ml/opik#5154 · 3 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
[Bug]: Unable to change throttling and maximum concurrent request in LLM-as-judge online evaluationEvtl. wieder frei Ein Pull Request dazu wurde ohne Merge geschlossen. OffenBug Escalated-request JC
Schwierigkeit 3/5 1-2 Tage Anfängerfreundlichkeit 50/100
comet-ml/opik#5037 · 5 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
[Bug]: Table default.DATABASECHANGELOG does not exist. Maybe you meant default.DATABASECHANGELOG1Evtl. wieder frei @JetoPistola hat das vor 34 Tagen übernommen, und es ist kein Pull Request offen. OffenJC
comet-ml/opik#5014 · 4 Kommentare · 1 zugewiesene Person ·
Maintainer antworten meist innerhalb von 1 Tag
-
[FR]: ability to filter on span.error_info.traceback valuesEvtl. wieder frei Ein Pull Request dazu wurde ohne Merge geschlossen. Offenenhancement JC
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 35/100
comet-ml/opik#5013 · 5 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
[FR]: Prompt type selector when creating a new prompt in the libraryEvtl. wieder frei Ein Pull Request dazu wurde ohne Merge geschlossen. Offenenhancement Escalated-request
Schwierigkeit 3/5 1-2 Tage Anfängerfreundlichkeit 28/100
comet-ml/opik#4938 · 3 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
enhancement Escalated-request
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 35/100
comet-ml/opik#4934 · 5 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
enhancement JC
Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 35/100
comet-ml/opik#4904 · 4 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
[FR]: consistency reportOffenenhancement Escalated-request
Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 12/100
comet-ml/opik#4902 · 2 Kommentare · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
[FR]: Add an icon to span/trace indicating that it contains an attachmentEvtl. wieder frei Ein Pull Request dazu wurde ohne Merge geschlossen. Offenenhancement Feature_Request Frontend
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 20/100
comet-ml/opik#4772 · 1 Kommentar ·
Maintainer antworten meist innerhalb von 1 Tag
-
[FR]: prompt folderEvtl. wieder frei @Nimrod007 hat das vor 280 Tagen übernommen, und es ist kein Pull Request offen. Offenenhancement Feature_Request
comet-ml/opik#4724 · 4 Kommentare · 1 Reaktion · 1 zugewiesene Person ·
Maintainer antworten meist innerhalb von 1 Tag
-
breaking-change dependencies enhancement JC Python-SDK
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 32/100
comet-ml/opik#4633 · 9 Kommentare · 2 Reaktionen ·
Maintainer antworten meist innerhalb von 1 Tag
-
[FR]: Add Support for `gemini-2.5-flash-image` ModelEvtl. wieder frei @AndreiCautisanu hat das vor 285 Tagen übernommen, und es ist kein Pull Request offen. OffenJC
comet-ml/opik#4607 · 3 Kommentare · 1 Reaktion · 1 zugewiesene Person ·
Maintainer antworten meist innerhalb von 1 Tag
-
Escalated-request
Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 30/100
comet-ml/opik#4503 · 5 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
[Bug]: Unable to run on the Clickhouse CloudEvtl. wieder frei Ein Pull Request dazu wurde ohne Merge geschlossen. OffenQuestion
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 35/100
comet-ml/opik#4316 · 7 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
Feature_Request Frontend JC
Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 15/100
comet-ml/opik#3741 · 2 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
[FR]: Add preview for CSV filesEvtl. wieder frei @Kaif-Imteyaz hat das vor 376 Tagen übernommen, und es ist kein Pull Request offen. Offenimprovement
Schwierigkeit 3/5 1-2 Tage Anfängerfreundlichkeit 40/100
comet-ml/opik#3447 · 11 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
[FR]: Allow pinning columns & inline attachment previews in main viewEvtl. wieder frei @JetoPistola hat das vor 35 Tagen übernommen, und es ist kein Pull Request offen. OffenBackend Feature_Request Frontend JC
comet-ml/opik#2814 · 4 Kommentare · 3 zugewiesene Personen ·
Maintainer antworten meist innerhalb von 1 Tag
-
Question
Schwierigkeit 4/5 3-5 Tage Anfängerfreundlichkeit 35/100
comet-ml/opik#2114 · 14 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag
-
Backend Escalated-request Feature_Request Frontend
Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 25/100
comet-ml/opik#2106 · 1 Kommentar · 1 Reaktion ·
Maintainer antworten meist innerhalb von 1 Tag
-
Backend Feature_Request Frontend Planned
Schwierigkeit 3/5 1-2 Tage Anfängerfreundlichkeit 30/100
comet-ml/opik#1567 · 1 Kommentar ·
Maintainer antworten meist innerhalb von 1 Tag
-
[FR]: Bar chart (categorical) score metric e.g. "low", "medium", "high"Evtl. wieder frei @aadereiko hat das vor 597 Tagen übernommen, und es ist kein Pull Request offen. OffenBackend Escalated-request Feature_Request Frontend
comet-ml/opik#1436 · 3 Kommentare · 1 zugewiesene Person ·
Maintainer antworten meist innerhalb von 1 Tag
-
[FR]: See source code in tracesEvtl. wieder frei Ein Pull Request dazu wurde ohne Merge geschlossen. OffenFeature_Request JC Planned
Schwierigkeit 5/5 Über eine Woche Anfängerfreundlichkeit 20/100
comet-ml/opik#1229 · 5 Kommentare · 2 Reaktionen ·
Maintainer antworten meist innerhalb von 1 Tag
-
Feature_Request JC Planned
Schwierigkeit 3/5 1-2 Tage Anfängerfreundlichkeit 35/100
comet-ml/opik#1097 · 2 Kommentare ·
Maintainer antworten meist innerhalb von 1 Tag