Hacktoberfest 2026: los issues que los mantenedores marcaron para octubre, abiertos y aptos para principiantes. Explorar issues de Hacktoberfest

mattpocock/evalite

Inicia sesión para seguir Ver en GitHub

Evaluate your LLM-powered apps with TypeScript

¿Es mattpocock/evalite apto para principiantes?

Hemos visto muy pocos pull requests recientes de colaboradores externos en mattpocock/evalite para saber con qué frecuencia se fusionan. Ahora mismo hay 3 issues aptos para principiantes abiertos.

Estrellas
1.7k
Forks
102
Issues abiertos para principiantes
3
Issues indexados
47
Lenguaje dominante
TypeScript
Licencia
MIT
Último push a GitHub
10/11/2025
Última indexación
19/9/2026
Guía de contribución
Sin código de conducta
Etiquetas para principiantes
Sin etiquetas para principiantes indexadas
Sin PR fusionados en 30 d

Cómo contribuir a mattpocock/evalite

  1. Lee primero la guía de contribución: explica cómo quieren los mantenedores que se propongan, prueben y revisen los cambios.
  2. Tus contribuciones se publicarán bajo la licencia MIT del proyecto.
  3. Elige uno de los 3 issues abiertos aptos para principiantes de abajo y comenta que quieres trabajar en él antes de empezar.
Para principiantes Todo
Abierto Todos

Las issues en las que quizá ya trabaja alguien aparecen al final. Ordenar todo por fecha

  • Is this still an active project
    Abierto
    • ¿Algo no está bien?

    Dificultad 5/5 Más de una semana Aptitud para principiantes 10/100

    mattpocock/evalite#405 · 1 comentario · 13 reacciones ·

  • UI fails on any remote access: bundle hardcodes localhost + server has no configurable bind host
    Abierto
    • ¿Algo no está bien?

    Dificultad 3/5 1-2 días Aptitud para principiantes 65/100

    mattpocock/evalite#404 ·

  • Support for AI SDK v7 in peerDependencies
    Abierto
    • ¿Algo no está bien?

    Dificultad 1/5 Menos de una hora Aptitud para principiantes 76/100

    mattpocock/evalite#400 · 7 reacciones ·

  • phantom dependency from evalite to vitest
    Abierto
    • ¿Algo no está bien?

    Dificultad 2/5 1-3 horas Aptitud para principiantes 55/100

    mattpocock/evalite#398 · 1 comentario ·

  • Bug: `wrapAISDKModel({ caching: false })` is silently ignored when tracing is enabled
    Abierto
    • ¿Algo no está bien?

    Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100

    mattpocock/evalite#395 ·

  • Various test suite UI improvements
    Abierto
    • ¿Algo no está bien?

    Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

    mattpocock/evalite#394 ·

  • Don't log task results when using `evalite serve`
    Abierto
    • ¿Algo no está bien?

    Dificultad 3/5 1-2 días Aptitud para principiantes 55/100

    mattpocock/evalite#393 ·

  • Clicking a trace row in the eval detail view does nothing (UI stays on eval-level panel)
    Abierto
    • ¿Algo no está bien?

    Dificultad 1/5 1-3 horas Aptitud para principiantes 82/100

    mattpocock/evalite#391 ·

  • possible regression: cannot use `@nuxt/test-utils` `defineVitestProject` directly in evalite.config.ts
    Abierto
    • ¿Algo no está bien?

    Dificultad 4/5 3-5 días Aptitud para principiantes 45/100

    mattpocock/evalite#390 ·

  • Upgrade to tsgo
    Abierto
    • ¿Algo no está bien?

    Dificultad 2/5 1-3 horas Aptitud para principiantes 48/100

    mattpocock/evalite#386 · 4 comentarios ·

  • `wrapAISDKModel` for `EmbeddingModelV2`
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 4/5 3-5 días Aptitud para principiantes 45/100

    mattpocock/evalite#374 ·

  • Vercel's default gateway model doesn't work with built-in LLM scorers
    Abierto
    • ¿Algo no está bien?
    triaged

    Dificultad 4/5 3-5 días Aptitud para principiantes 38/100

    mattpocock/evalite#372 · 1 comentario · 1 reacción ·

  • `evalite export` does not fail if threshold is not reached
    Abierto
    • ¿Algo no está bien?

    Dificultad 3/5 1-2 días Aptitud para principiantes 52/100

    mattpocock/evalite#370 · 2 comentarios ·

  • Add support for running multiple eval files by name
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    enhancement

    mattpocock/evalite#367 · 4 reacciones · 1 asignado ·

  • Add describe/it or other ways to better organize evals within a file
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

    mattpocock/evalite#364 · 6 reacciones ·

  • wrapAISDKModel: Unsupported content type: reasoning (AI SDK v5 reasoning parts)
    Abierto
    • ¿Algo no está bien?

    Dificultad 3/5 1-2 días Aptitud para principiantes 55/100

    mattpocock/evalite#361 · 4 comentarios · 5 reacciones ·

  • A/B testing pass "variant" as argument to test data function
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 4/5 3-5 días Aptitud para principiantes 35/100

    mattpocock/evalite#359 · 1 comentario ·

  • Add caveat to 'built-in scorers' that they be used sparingly
    Abierto
    • ¿Algo no está bien?
    documentation enhancement

    Dificultad 2/5 1-3 horas Aptitud para principiantes 35/100

    mattpocock/evalite#356 · 2 comentarios · 1 reacción ·

  • Bug: Evalite Creates Cache Directory Regardless of `cacheEnabled` Setting
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?

    mattpocock/evalite#354 · 2 comentarios · 1 asignado ·

  • Display more trace details
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

    mattpocock/evalite#353 · 1 reacción ·

  • Score calculation needs more explanation
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 2/5 1-3 horas Aptitud para principiantes 35/100

    mattpocock/evalite#348 · 1 comentario ·

  • Threshold as evalite config param
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 3/5 1-2 días Aptitud para principiantes 48/100

    mattpocock/evalite#347 · 2 reacciones ·

  • UI: Show progress and evals as they complete when trialCount > 1
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 3/5 1-2 días Aptitud para principiantes 48/100

    mattpocock/evalite#345 · 1 comentario ·

  • Support `.only` line in `vitest` do focus on specific files/tests
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 3/5 1-2 días Aptitud para principiantes 30/100

    mattpocock/evalite#344 · 1 comentario · 1 reacción ·

  • Global Statistics
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 3/5 1-2 días Aptitud para principiantes 45/100

    mattpocock/evalite#343 · 1 comentario · 1 reacción ·

  • Document how to evaluate MCP servers
    Abierto
    • ¿Algo no está bien?
    documentation enhancement

    Dificultad 3/5 1-2 días Aptitud para principiantes 45/100

    mattpocock/evalite#337 · 4 comentarios ·

  • Command to start the UI without running evals
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 3/5 1-2 días Aptitud para principiantes 42/100

    mattpocock/evalite#335 · 2 comentarios ·

  • [future] AI SDK v6 Integration Plans
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 3/5 1-2 días Aptitud para principiantes 45/100

    mattpocock/evalite#334 · 1 reacción ·

  • Clarify difference between eval-driven development and test-driven development in docs
    Abierto
    • ¿Algo no está bien?
    documentation enhancement

    Dificultad 1/5 Menos de una hora Aptitud para principiantes 55/100

    mattpocock/evalite#315 · 1 reacción ·

  • Add an "Evalite By Example" section to "What Is Evalite?"
    Abierto
    • ¿Algo no está bien?
    documentation enhancement

    Dificultad 2/5 Medio día Aptitud para principiantes 55/100

    mattpocock/evalite#313 ·

  • evalite.report() for the simplest-possible integration story
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

    mattpocock/evalite#308 · 1 reacción ·

  • Add 'copy' button to each page of the docs
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    enhancement

    mattpocock/evalite#307 · 6 comentarios · 1 asignado ·

  • Feature: Allow scorer functions to return arrays of scores
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 2/5 1-3 horas Aptitud para principiantes 55/100

    mattpocock/evalite#304 · 1 comentario ·

  • Ability to hide score columns in UI
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 3/5 1-2 días Aptitud para principiantes 45/100

    mattpocock/evalite#298 · 2 reacciones ·

  • Allow passing the same filtering options from the interactive CLI as arguments/config
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 4/5 3-5 días Aptitud para principiantes 38/100

    mattpocock/evalite#294 · 2 comentarios · 1 reacción ·

  • Synthetic Test Data Set Generation
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

    mattpocock/evalite#292 · 2 comentarios ·

  • Weighted scorers
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 4/5 3-5 días Aptitud para principiantes 35/100

    mattpocock/evalite#289 · 4 comentarios ·

  • add a contributors images in Readme.md
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 2/5 1-3 horas Aptitud para principiantes 35/100

    mattpocock/evalite#264 · 3 comentarios ·

  • Git integration: track commit & branch in eval runs
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

    mattpocock/evalite#236 · 1 reacción ·

  • Eval duration not being tracked properly
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?

    mattpocock/evalite#223 · 5 comentarios · 1 asignado ·

  • Adapter: Implement Postgres adapter
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

    mattpocock/evalite#222 · 2 comentarios ·

  • Adapter: Implement JSON adapter
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

    mattpocock/evalite#221 ·

  • Add Screenshots to Docs
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 5/5 Más de una semana Aptitud para principiantes 20/100

    mattpocock/evalite#216 ·

  • Feature Request (CLI) - Show Failing Scorers
    Abierto
    • ¿Algo no está bien?
    triaged

    Dificultad 4/5 3-5 días Aptitud para principiantes 42/100

    mattpocock/evalite#125 · 5 comentarios · 1 reacción ·

  • Track latency and allow passing to scorers and graphs
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 4/5 3-5 días Aptitud para principiantes 35/100

    mattpocock/evalite#111 · 1 reacción ·

  • Add Human Evaluation from inside Evalite
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 5/5 Más de una semana Aptitud para principiantes 30/100

    mattpocock/evalite#92 · 1 comentario · 4 reacciones ·

  • Handle images and files traced from AI SDK
    Abierto
    • ¿Algo no está bien?
    enhancement

    Dificultad 4/5 3-5 días Aptitud para principiantes 35/100

    mattpocock/evalite#86 · 1 reacción ·

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.