Evaluation: Add latency metric
Los mantenedores suelen responder en 2 días
@AkhileshNegi ya está trabajando en esto.
Desde el 10/7/2026.
Evaluación
Este issue todavía no se ha evaluado.
Descripción
Is your feature request related to a problem?
We lack important metrics like latency for fast evaluations, which impacts decision-making processes. The absence of these metrics can lead to suboptimal choices.
Describe the solution you'd like
- Add latency as a metric for fast evaluations
- Note that cost metrics have already been added
Original issue
- Latency as metric to add for Fast evals
- Cost is already added
- Lenguaje dominante
- Python
- Estrellas
- 18
- Forks
- 10
- Merge medio
- 3 d 20 h
- PR fusionados (30 d)
- 14
Preparar el entorno
- Incluye un Dockerfile o un archivo de Docker Compose
- Tiene una plantilla de pull request
- Leer la guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de ProjectTech4DevAI/kaapi-backend
-
bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100
ProjectTech4DevAI/kaapi-backend#889 ·
Los mantenedores suelen responder en 2 días
-
enhancement
Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100
ProjectTech4DevAI/kaapi-backend#269 · 1 comentario ·
Los mantenedores suelen responder en 2 días
-
Evaluation: TTS metrics for projectsPosiblemente ocupada @Prajna1999 la tomó hoy. Abierto
ProjectTech4DevAI/kaapi-backend#1229 · 1 asignado ·
Los mantenedores suelen responder en 2 días
-
TTS Evaluation: Add more modelsPosiblemente ocupada @Prajna1999 la tomó hoy. Abierto
ProjectTech4DevAI/kaapi-backend#1228 · 1 asignado ·
Los mantenedores suelen responder en 2 días
-
Guardrails: Decoupling API schemasPosiblemente ocupada @Prajna1999 la tomó hoy. Abierto
ProjectTech4DevAI/kaapi-backend#1227 · 1 asignado ·
Los mantenedores suelen responder en 2 días
Todos los issues de ProjectTech4DevAI/kaapi-backend
Issues similares
-
bug needs-triage
Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100
debpalash/VoiceStudio#2624 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 72/100
-
SQLGlot translates Spark concat_ws on an array into array stringificationPosiblemente ocupada @ansh-rohilla la tomó hoy. Abierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 74/100
Los mantenedores suelen responder en 1 día
-
Make Catch2 optional when `RDK_BUILD_CPP_TESTS=OFF`Posiblemente ocupada @pechersky la tomó hoy. Abiertobug
Dificultad 2/5 1-3 horas Aptitud para principiantes 82/100
Los mantenedores suelen responder en 2 días