Propietario

braintrustdata

16 repositorios indexados · Ver en GitHub

autoevals
AutoEvals is a tool for quickly and easily evaluating AI model outputs using best practices.

Python · 1037 estrellas
braintrust-proxy

TypeScript · 410 estrellas
braintrust-sdk-javascript
JavaScript Tracing & Evals library for Braintrust

TypeScript · 27 estrellas
lingua

Rust · 26 estrellas
braintrust-claude-plugin
Trace Claude Code sessions in Braintrust via the Braintrust Claude Plugin

Python · 21 estrellas
braintrust-sdk-java

Java · 21 estrellas
eval-action

TypeScript · 20 estrellas
braintrust-sdk-python
Python Tracing & Evals library for Braintrust

Python · 19 estrellas
terraform-aws-braintrust-data-plane
Module to set up the Braintrust data plane in an AWS account

HCL · 16 estrellas
bt

Rust · 13 estrellas
braintrust-sdk-ruby
Tracing & Evals library for Braintrust

Ruby · 9 estrellas
braintrust-sdk-go
Braintrust Go SDK

Go · 7 estrellas
braintrust-sdk-rust

Rust · 4 estrellas
braintrust-sdk-dotnet

C# · 4 estrellas
braintrust-codex-plugin
Trace Codex sessions in Braintrust via the Braintrust Codex Plugin

Shell · 2 estrellas
braintrust-spec
spec files for building braintrust SDKs

Shell · 1 estrella

Para principiantes Todo

Abierto Todos

[bot] Instrument aws-sdk-polly (127K weekly downloads) Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 38/100

braintrustdata/braintrust-sdk-ruby#216 · Abierto el 21/9/2026
[bot] Instrument AssemblyAI Python SDK (585,463 weekly downloads) Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

braintrustdata/braintrust-sdk-python#787 · Abierto el 21/9/2026
[bot] Instrument SGLang offline engine (574,007 weekly downloads) Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 55/100

braintrustdata/braintrust-sdk-python#786 · Abierto el 21/9/2026
[bot] Instrument llama-cpp-python (114,222 weekly downloads) Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

braintrustdata/braintrust-sdk-python#784 · Abierto el 21/9/2026
[BOT ISSUE] Bedrock: add missing Moonshot Kimi K3 models (moonshotai.kimi-k3 + geo variants) Abierto

bot-issue

Dificultad 2/5 1-3 horas Aptitud para principiantes 84/100

braintrustdata/braintrust-proxy#1271 · 1 comentario · Abierto el 19/9/2026
[BOT ISSUE] Mistral: add missing zai-glm-5-3 (Z.ai GLM 5.3) Abierto

autofix-blocked

Dificultad 1/5 1-3 horas Aptitud para principiantes 90/100

braintrustdata/braintrust-proxy#1269 · 1 comentario · Abierto el 18/9/2026
Name collision in crates.io Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

braintrustdata/lingua#456 · Abierto el 17/9/2026
Windows: run_hidden.vbs doesn't forward hook stdin, causing bt trace hook to hang and leak processes indefinitely Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 55/100

braintrustdata/braintrust-claude-plugin#41 · 2 comentarios · Abierto el 17/9/2026
Dataset.createSnapshot() pins a pre-delete transaction id after delete-only edits (version() ignores tombstones) Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 58/100

braintrustdata/braintrust-sdk-javascript#2492 · Abierto el 16/9/2026
[BOT ISSUE] Cohere: add missing reasoning flag and pricing to command-a-reasoning-08-2025 Abierto

autofix-blocked bot-issue

Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100

braintrustdata/braintrust-proxy#1257 · 1 comentario · Abierto el 16/9/2026
[BOT ISSUE] Anthropic: add missing claude-mythos-5 and anthropic.claude-mythos-5 (re-removed by sync) Abierto

autofix-blocked bot-issue

Dificultad 3/5 1-2 días Aptitud para principiantes 72/100

braintrustdata/braintrust-proxy#1253 · 1 comentario · Abierto el 16/9/2026
[bot] AWS Bedrock batch inference (CreateModelInvocationJob) is not instrumented at all Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

braintrustdata/braintrust-sdk-java#178 · Abierto el 16/9/2026
[bot] Google GenAI: streaming responses drop `url_context_metadata` that non-streaming responses preserve Abierto

Dificultad 2/5 1-3 horas Aptitud para principiantes 86/100

braintrustdata/braintrust-sdk-python#774 · Abierto el 16/9/2026
[bot] Microsoft.Agents.AI.Workflows (multi-agent graph orchestration) has zero instrumentation Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 45/100

braintrustdata/braintrust-sdk-dotnet#103 · Abierto el 16/9/2026
gemini-omni-1.1-flash Abierto

autofix-blocked

Dificultad 4/5 3-5 días Aptitud para principiantes 20/100

braintrustdata/braintrust-proxy#1251 · Abierto el 15/9/2026
Feature request: additional DB parameters and enabled_cloudwatch_logs_exports on the database module (pgaudit) Abierto

Dificultad 3/5 1-2 días Aptitud para principiantes 72/100

braintrustdata/terraform-aws-braintrust-data-plane#382 · Abierto el 15/9/2026
Feature request: optional access_logs / connection_logs input on the module's load balancers Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 68/100

braintrustdata/terraform-aws-braintrust-data-plane#381 · Abierto el 15/9/2026
[bot] Instrument NVIDIA NeMo Guardrails (149,615 weekly downloads) Abierto

bot-automation new-integration

Dificultad 4/5 3-5 días Aptitud para principiantes 52/100

braintrustdata/braintrust-sdk-python#768 · Abierto el 14/9/2026
[bot] Instrument mcp (256K weekly downloads) Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 55/100

braintrustdata/braintrust-sdk-ruby#212 · Abierto el 14/9/2026
[bot] Instrument Cloudflare Workers AI (610,717 weekly downloads) Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 65/100

braintrustdata/braintrust-sdk-go#236 · 4 comentarios · Abierto el 14/9/2026
[bot] Instrument Qdrant (2,593,058 weekly downloads) Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

braintrustdata/braintrust-sdk-go#235 · Abierto el 14/9/2026
[bot] Instrument Weaviate (2,169,002 weekly downloads) Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 65/100

braintrustdata/braintrust-sdk-go#234 · Abierto el 14/9/2026
[bot] Instrument AWS Bedrock AgentCore (1,161,890 weekly downloads) Abierto

bot-automation new-integration

Dificultad 5/5 Más de una semana Aptitud para principiantes 42/100

braintrustdata/braintrust-sdk-python#767 · Abierto el 14/9/2026
[bot] Instrument Portkey AI (140,424 weekly downloads) Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 56/100

braintrustdata/braintrust-sdk-javascript#2482 · Abierto el 14/9/2026
[bot] Instrument Composio (631,324 weekly downloads) Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 68/100

braintrustdata/braintrust-sdk-javascript#2481 · Abierto el 14/9/2026
[bot] Instrument E2B (1,253,397 weekly downloads) Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 58/100

braintrustdata/braintrust-sdk-javascript#2480 · Abierto el 14/9/2026
[BOT ISSUE] OpenAI: add missing gpt-rosalind-research Abierto

autofix-blocked bot-issue

Dificultad 1/5 Menos de una hora Aptitud para principiantes 88/100

braintrustdata/braintrust-proxy#1238 · 1 comentario · Abierto el 12/9/2026
setup_agno() does not instrument Agent.acontinue_run/Team.acontinue_run (agno's paused-run resume path) Abierto

python

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

braintrustdata/braintrust-sdk-python#764 · 2 comentarios · Abierto el 11/9/2026
[BOT ISSUE] Together: add missing Prism-ML/Ternary-Bonsai-27B Abierto

autofix-blocked bot-issue

Dificultad 1/5 Menos de una hora Aptitud para principiantes 88/100

braintrustdata/braintrust-proxy#1233 · 1 comentario · Abierto el 11/9/2026
gpt-live-1 Abierto

autofix-blocked

Dificultad 5/5 Más de una semana Aptitud para principiantes 1/100

braintrustdata/braintrust-proxy#1228 · Abierto el 10/9/2026
[bot] Anthropic integration's hardcoded metadata field list omits structured outputs (output_config) and has no path to capture new request fields Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 56/100

braintrustdata/braintrust-sdk-dotnet#102 · Abierto el 9/9/2026
[bot] Agent Framework integration never captures request parameters (temperature, tools, response_format, etc.) as braintrust.metadata Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 58/100

braintrustdata/braintrust-sdk-dotnet#101 · Abierto el 9/9/2026
[bot] LiteLLM: `batch_completion` (and `batch_completion_models`) not instrumented Abierto

integration: litellm

Dificultad 3/5 1-2 días Aptitud para principiantes 76/100

braintrustdata/braintrust-sdk-python#755 · Abierto el 9/9/2026
[bot] Google GenAI video generation (generateVideos / Veo) traced with materially less detail than text generation Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 55/100

braintrustdata/braintrust-sdk-java#176 · Abierto el 9/9/2026
Track deferred ElevenLabs webhook transcription and conversational voice APIs Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

braintrustdata/braintrust-sdk-javascript#2440 · Abierto el 8/9/2026
Instrument LangGraph Platform thread-controller execution Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 28/100

braintrustdata/braintrust-sdk-javascript#2438 · Abierto el 8/9/2026
Instrument LangGraph Platform background run submission and joining Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

braintrustdata/braintrust-sdk-javascript#2437 · Abierto el 8/9/2026
Cross-trial consistency (kappa, self-agreement) falls outside the Scorer shape Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 30/100

braintrustdata/autoevals#219 · Abierto el 7/9/2026
[bot] Instrument Pinecone Inference API (pinecone-sdk) (2,500 weekly downloads) Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 55/100

braintrustdata/braintrust-sdk-rust#100 · Abierto el 7/9/2026
[bot] Instrument Hume AI (52,017 weekly downloads) Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

braintrustdata/braintrust-sdk-javascript#2431 · Abierto el 7/9/2026
[bot] Instrument Cartesia (60,223 weekly downloads) Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

braintrustdata/braintrust-sdk-javascript#2430 · Abierto el 7/9/2026
[bot] Instrument FlagEmbedding (128,075 weekly downloads) Abierto

new-integration

Dificultad 4/5 3-5 días Aptitud para principiantes 58/100

braintrustdata/braintrust-sdk-python#744 · Abierto el 7/9/2026
[bot] Instrument DashScope Python SDK (285,123 weekly downloads) Abierto

new-integration

Dificultad 4/5 3-5 días Aptitud para principiantes 55/100

braintrustdata/braintrust-sdk-python#743 · Abierto el 7/9/2026
[bot] Instrument vLLM offline inference (526,872 weekly downloads) Abierto

new-integration

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

braintrustdata/braintrust-sdk-python#742 · Abierto el 7/9/2026
[bot] Instrument Pinecone Inference Go SDK (745,233 weekly downloads) Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 72/100

braintrustdata/braintrust-sdk-go#221 · Abierto el 7/9/2026
OrcaRouter provider support for Autoevals Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

braintrustdata/autoevals#218 · Abierto el 4/9/2026
[BOT ISSUE] Google: add missing gemini-omni-1.1-flash model Abierto

autofix-blocked bot-issue

Dificultad 2/5 1-3 horas Aptitud para principiantes 82/100

braintrustdata/braintrust-proxy#1197 · 1 comentario · Abierto el 2/9/2026
[bot] Cohere Embed Jobs API (batch embeddings) has zero instrumentation Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 68/100

braintrustdata/braintrust-sdk-javascript#2426 · Abierto el 2/9/2026
[bot] Google GenAI video generation (Veo, GenerateVideos) not instrumented in Go SDK Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 68/100

braintrustdata/braintrust-sdk-go#217 · Abierto el 2/9/2026
[bot] parse_prompt_tokens_details missing OpenAI's `cache_write_tokens` field Abierto

Dificultad 3/5 1-2 días Aptitud para principiantes 76/100

braintrustdata/braintrust-sdk-rust#99 · Abierto el 2/9/2026

Mostrando los 100 más recientes

Esta página solo lista lo indexado más recientemente. El filtro avanzado tiene el inventario completo, acotado por lenguaje, dificultad y duración.

Abrir el filtro avanzado

braintrustdata

Mostrando los 100 más recientes

Recibe los nuevos issues en tu correo