Propriétaire
comet-ml
1 dépôt indexé · Voir sur GitHub
-
opik
Debug, evaluate, and monitor your LLM applications, RAG systems, and agentic workflows with comprehensive tracing, automated evaluations,...
Python · 22375 étoiles
Les issues sur lesquelles quelqu’un travaille peut-être déjà sont listées en dernier. Tout trier par date
-
Difficulté 3/5 1-2 jours Accessibilité débutants 42/100
comet-ml/opik#9090 · 1 commentaire · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
Difficulté 2/5 1-3 heures Accessibilité débutants 73/100
comet-ml/opik#9089 · 1 commentaire · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
Difficulté 2/5 1-3 heures Accessibilité débutants 70/100
comet-ml/opik#9069 · 1 commentaire · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
Dependency DashboardOuverte
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 1/100
comet-ml/opik#9063 · 1 commentaire · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
LLM monetary costs are recorded with no currency — ingest OTel GenAI gen_ai.usage.cost.currencyOuverteEscalated request
Difficulté 3/5 1-2 jours Accessibilité débutants 78/100
comet-ml/opik#8564 · 1 commentaire · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
[Bug]: @track(create_duplicate_root_span=False) and source= are ignored for generator functionsPeut-être à nouveau libre @aadereiko l’a pris il y a 30 jours, et aucune pull request n’est ouverte. OuverteEscalated request
comet-ml/opik#8421 · 1 commentaire · 1 réaction · 1 personne assignée ·
Les mainteneurs répondent en général sous 1 jour
-
Evaluation pipeline: failed metrics silently dropped from averages; SUT output unescaped in judge prompts; g_eval logprob scoring misparses digit tokens; error handler imports SDKs inside except blockPeut-être à nouveau libre @feiiiiii5 l’a pris il y a 47 jours, et aucune pull request n’est ouverte. Ouverte
Difficulté 4/5 3-5 jours Accessibilité débutants 48/100
comet-ml/opik#8134 · 8 commentaires · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
[Bug]: Bulk span update does not recalculate total_estimated_cost when model/provider/usage changePeut-être à nouveau libre Une pull request pour cette issue a été fermée sans être fusionnée. Ouverte
Difficulté 3/5 1-2 jours Accessibilité débutants 35/100
comet-ml/opik#8098 · 2 commentaires · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
Escalated request
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 32/100
comet-ml/opik#7903 · 2 commentaires · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
enhancement Escalated request
Difficulté 4/5 3-5 jours Accessibilité débutants 48/100
comet-ml/opik#7893 · 1 commentaire · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
Difficulté 4/5 3-5 jours Accessibilité débutants 48/100
comet-ml/opik#7856 · 3 commentaires · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
[FR]: Use span provider hint to order heuristics rather than only using fixed registry.ts orderPeut-être à nouveau libre @yaodong-shen l’a pris il y a 84 jours, et aucune pull request n’est ouverte. Ouverteenhancement
Difficulté 4/5 3-5 jours Accessibilité débutants 40/100
comet-ml/opik#7658 · 2 commentaires · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
[FR]: "Hide All But Last N Messages" metadataPeut-être à nouveau libre Une pull request pour cette issue a été fermée sans être fusionnée. Ouverteenhancement Escalated-request
Difficulté 4/5 3-5 jours Accessibilité débutants 30/100
comet-ml/opik#7594 · 3 commentaires · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
[Bug]: Cost overcounted when trace_id values shared between projectsPeut-être à nouveau libre Une pull request pour cette issue a été fermée sans être fusionnée. Ouverte
Difficulté 4/5 3-5 jours Accessibilité débutants 25/100
comet-ml/opik#7473 · 6 commentaires · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
enhancement Escalated-request
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 12/100
comet-ml/opik#7168 · 4 commentaires · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
Escalated-request
Difficulté 4/5 3-5 jours Accessibilité débutants 20/100
comet-ml/opik#7090 · 3 commentaires · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
Escalated-request Feature_Request
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 42/100
comet-ml/opik#6726 · 1 commentaire ·
Les mainteneurs répondent en général sous 1 jour
-
Cannot set up thread-level online evaluation rule with a message-count filterPeut-être à nouveau libre @Nimrod007 l’a pris il y a 168 jours, et aucune pull request n’est ouverte. OuverteBackend Bug JC
comet-ml/opik#6619 · 1 personne assignée ·
Les mainteneurs répondent en général sous 1 jour
-
enhancement Escalated-request
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 25/100
comet-ml/opik#6403 · 4 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
enhancement
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 35/100
comet-ml/opik#6231 · 2 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
[FR]: Whitelist/blacklist for group by tags in new dashboard widgetPeut-être à nouveau libre Une pull request pour cette issue a été fermée sans être fusionnée. Ouverteenhancement JC
Difficulté 4/5 3-5 jours Accessibilité débutants 45/100
comet-ml/opik#6182 · 3 commentaires · 2 réactions ·
Les mainteneurs répondent en général sous 1 jour
-
Escalated-request
Difficulté 4/5 3-5 jours Accessibilité débutants 25/100
comet-ml/opik#5870 · 1 commentaire ·
Les mainteneurs répondent en général sous 1 jour
-
[FR]: Jinja2 on playgroundOuverteenhancement
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 35/100
comet-ml/opik#5838 · 2 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
[Bug]: ClickHouse migrations fail on managed services due to hardcoded '{cluster}' macroPeut-être à nouveau libre Une pull request pour cette issue a été fermée sans être fusionnée. Ouverte
Difficulté 3/5 1-2 jours Accessibilité débutants 42/100
comet-ml/opik#5834 · 1 commentaire ·
Les mainteneurs répondent en général sous 1 jour
-
Escalated-request JC Question
Difficulté 4/5 3-5 jours Accessibilité débutants 28/100
comet-ml/opik#5551 · 4 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
enhancement
Difficulté 4/5 3-5 jours Accessibilité débutants 18/100
comet-ml/opik#5344 · 3 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
[Bug]: Tool call spans from `logfire.instrument_httpx(capture_all=True)` shown as `general` instead `tool`Peut-être à nouveau libre Une pull request pour cette issue a été fermée sans être fusionnée. OuverteJC
Difficulté 4/5 3-5 jours Accessibilité débutants 32/100
comet-ml/opik#5334 · 4 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
enhancement Escalated-request JC
Difficulté 4/5 3-5 jours Accessibilité débutants 48/100
comet-ml/opik#5154 · 3 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
[Bug]: Unable to change throttling and maximum concurrent request in LLM-as-judge online evaluationPeut-être à nouveau libre Une pull request pour cette issue a été fermée sans être fusionnée. OuverteBug Escalated-request JC
Difficulté 3/5 1-2 jours Accessibilité débutants 50/100
comet-ml/opik#5037 · 5 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
[Bug]: Table default.DATABASECHANGELOG does not exist. Maybe you meant default.DATABASECHANGELOG1Peut-être à nouveau libre @JetoPistola l’a pris il y a 34 jours, et aucune pull request n’est ouverte. OuverteJC
comet-ml/opik#5014 · 4 commentaires · 1 personne assignée ·
Les mainteneurs répondent en général sous 1 jour
-
[FR]: ability to filter on span.error_info.traceback valuesPeut-être à nouveau libre Une pull request pour cette issue a été fermée sans être fusionnée. Ouverteenhancement JC
Difficulté 4/5 3-5 jours Accessibilité débutants 35/100
comet-ml/opik#5013 · 5 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
[FR]: Prompt type selector when creating a new prompt in the libraryPeut-être à nouveau libre Une pull request pour cette issue a été fermée sans être fusionnée. Ouverteenhancement Escalated-request
Difficulté 3/5 1-2 jours Accessibilité débutants 28/100
comet-ml/opik#4938 · 3 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
[FR]: prompt composabilityOuverteenhancement Escalated-request
Difficulté 4/5 3-5 jours Accessibilité débutants 35/100
comet-ml/opik#4934 · 5 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
enhancement JC
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 35/100
comet-ml/opik#4904 · 4 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
[FR]: consistency reportOuverteenhancement Escalated-request
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 12/100
comet-ml/opik#4902 · 2 commentaires · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
[FR]: Add an icon to span/trace indicating that it contains an attachmentPeut-être à nouveau libre Une pull request pour cette issue a été fermée sans être fusionnée. Ouverteenhancement Feature_Request Frontend
Difficulté 4/5 3-5 jours Accessibilité débutants 20/100
comet-ml/opik#4772 · 1 commentaire ·
Les mainteneurs répondent en général sous 1 jour
-
[FR]: prompt folderPeut-être à nouveau libre @Nimrod007 l’a pris il y a 280 jours, et aucune pull request n’est ouverte. Ouverteenhancement Feature_Request
comet-ml/opik#4724 · 4 commentaires · 1 réaction · 1 personne assignée ·
Les mainteneurs répondent en général sous 1 jour
-
breaking-change dependencies enhancement JC Python-SDK
Difficulté 4/5 3-5 jours Accessibilité débutants 32/100
comet-ml/opik#4633 · 9 commentaires · 2 réactions ·
Les mainteneurs répondent en général sous 1 jour
-
[FR]: Add Support for `gemini-2.5-flash-image` ModelPeut-être à nouveau libre @AndreiCautisanu l’a pris il y a 285 jours, et aucune pull request n’est ouverte. OuverteJC
comet-ml/opik#4607 · 3 commentaires · 1 réaction · 1 personne assignée ·
Les mainteneurs répondent en général sous 1 jour
-
Escalated-request
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 30/100
comet-ml/opik#4503 · 5 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
[Bug]: Unable to run on the Clickhouse CloudPeut-être à nouveau libre Une pull request pour cette issue a été fermée sans être fusionnée. OuverteQuestion
Difficulté 4/5 3-5 jours Accessibilité débutants 35/100
comet-ml/opik#4316 · 7 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
Feature_Request Frontend JC
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 15/100
comet-ml/opik#3741 · 2 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
[FR]: Add preview for CSV filesPeut-être à nouveau libre @Kaif-Imteyaz l’a pris il y a 376 jours, et aucune pull request n’est ouverte. Ouverteimprovement
Difficulté 3/5 1-2 jours Accessibilité débutants 40/100
comet-ml/opik#3447 · 11 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
[FR]: Allow pinning columns & inline attachment previews in main viewPeut-être à nouveau libre @JetoPistola l’a pris il y a 35 jours, et aucune pull request n’est ouverte. OuverteBackend Feature_Request Frontend JC
comet-ml/opik#2814 · 4 commentaires · 3 personnes assignées ·
Les mainteneurs répondent en général sous 1 jour
-
Question
Difficulté 4/5 3-5 jours Accessibilité débutants 35/100
comet-ml/opik#2114 · 14 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
Backend Escalated-request Feature_Request Frontend
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 25/100
comet-ml/opik#2106 · 1 commentaire · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
Backend Feature_Request Frontend Planned
Difficulté 3/5 1-2 jours Accessibilité débutants 30/100
comet-ml/opik#1567 · 1 commentaire ·
Les mainteneurs répondent en général sous 1 jour
-
[FR]: Bar chart (categorical) score metric e.g. "low", "medium", "high"Peut-être à nouveau libre @aadereiko l’a pris il y a 597 jours, et aucune pull request n’est ouverte. OuverteBackend Escalated-request Feature_Request Frontend
comet-ml/opik#1436 · 3 commentaires · 1 personne assignée ·
Les mainteneurs répondent en général sous 1 jour
-
[FR]: See source code in tracesPeut-être à nouveau libre Une pull request pour cette issue a été fermée sans être fusionnée. OuverteFeature_Request JC Planned
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 20/100
comet-ml/opik#1229 · 5 commentaires · 2 réactions ·
Les mainteneurs répondent en général sous 1 jour
-
Feature_Request JC Planned
Difficulté 3/5 1-2 jours Accessibilité débutants 35/100
comet-ml/opik#1097 · 2 commentaires ·
Les mainteneurs répondent en général sous 1 jour