Scout agreement fixture
Los mantenedores suelen responder en 1 día
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 4/5
- Tiempo estimado
- 3-5 días
- Aptitud para principiantes
- 35/100
- Tipo de issue
- Nueva funcionalidad
- Claridad
- Bastante claro
- Estado de actividad
- Activo
- Stack tecnológico
- csharp
- Área
- documentation, testing
Línea de trabajo
Begin by reading parent issue #21 and blocked issue #36 to learn the Scout's design and current gaps. Create a separate integration test project that runs the Scout against a configured llama-server with 20–30 labelled results, then document running it in a README. Done means all four acceptance criteria are checked off.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
Parent
#21
What to build
A repeatable check of how well the Scout separates useful results from noise, to run after any model, quant or prompt change and to decide whether a larger model is needed.
Acceptance criteria
- A separate integration test project, not run by CI
- 20–30 labelled real results (useful or noise) with topic briefs, free of personal data
- Runs the Scout against a configured real llama-server and reports agreement with the labels
- README documents how to run it and how to read the result
Blocked by
- #36
- Lenguaje dominante
- C#
- Estrellas
- 0
- Forks
- 0
- Merge medio
- 44 min
- PR fusionados (30 d)
- 41
Preparar el entorno
Este proyecto no incluye contenedor de desarrollo, Dockerfile ni guía de contribución, así que la configuración corre por tu cuenta: empieza por su README y consulta nuestra guía para la primera contribución para los pasos generales.
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de DigiBanks99/knowledge-base
-
Freshness from ingestion outcomeAbiertoenhancement ready-for-agent
Dificultad 4/5 3-5 días Aptitud para principiantes 45/100
DigiBanks99/knowledge-base#37 ·
Los mantenedores suelen responder en 1 día
-
enhancement ready-for-agent
Dificultad 4/5 3-5 días Aptitud para principiantes 45/100
DigiBanks99/knowledge-base#36 ·
Los mantenedores suelen responder en 1 día
-
enhancement ready-for-agent
Dificultad 5/5 Más de una semana Aptitud para principiantes 10/100
DigiBanks99/knowledge-base#21 ·
Los mantenedores suelen responder en 1 día
Todos los issues de DigiBanks99/knowledge-base
Issues similares
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 72/100
Open-Systems-Pharmacology/OSPSuite.Core#3049 ·
Los mantenedores suelen responder en 1 día
-
needs attention public-client untriaged
Dificultad 2/5 1-3 horas Aptitud para principiantes 73/100
AzureAD/microsoft-authentication-library-for-dotnet#6242 ·
Los mantenedores suelen responder en 2 días
-
docs: HTML config transform example sets advancedCustomization at a path the UI does not readAbierto
Dificultad 1/5 1-3 horas Aptitud para principiantes 90/100
criticalmanufacturing/cli#882 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
Dome-Works/DOME#129 ·
Los mantenedores suelen responder en 1 día
-
bug sev:L
Dificultad 2/5 1-3 horas Aptitud para principiantes 82/100
Systemorph/MeshWeaver#7480 ·
Los mantenedores suelen responder en 1 día