Automatic upload traces to hugging-face
@recursix ya está trabajando en esto.
Desde el 7/10/2024.
Evaluación
Este issue todavía no se ha evaluado.
Descripción
Make tools to simplify adding traces of agents to an ever growing huggingfaces dataset.
-
create 2 datasets on hugging face
- one that would be an index to be able to easily retrieve traces based on attributes similar to the dataframe when we run
load_result_df - one that contains actual zipped traces that can be retrieved from a pointer in the index
- one that would be an index to be able to easily retrieve traces based on attributes similar to the dataframe when we run
-
make code to upload a study trace by trace and easy way to group the traces by study in the index.
-
legality:
- limit adding only from the domains that are whitlisted (e.g. our benchmarks or a subset of them)
- based on which LLM and which benchmarks attribute a specific license to it.
- Lenguaje dominante
- Python
- Estrellas
- 644
- Forks
- 134
- Métricas de merge de PR
- Sin PR fusionados en 30 d
Preparar el entorno
Este proyecto no incluye contenedor de desarrollo, Dockerfile ni guía de contribución, así que la configuración corre por tu cuenta: empieza por su README y consulta nuestra guía para la primera contribución para los pasos generales.
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de ServiceNow/AgentLab
-
Dificultad 4/5 3-5 días Aptitud para principiantes 48/100
ServiceNow/AgentLab#340 ·
-
Availability and use terms for minimized HTTP traces linked to recorded agent configurationsAbierto
Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100
ServiceNow/AgentLab#339 ·
-
Dificultad 4/5 3-5 días Aptitud para principiantes 22/100
ServiceNow/AgentLab#331 ·
-
Qwen3 IntegrationAbierto
Dificultad 4/5 3-5 días Aptitud para principiantes 15/100
ServiceNow/AgentLab#329 ·
-
Dificultad 3/5 1-2 días Aptitud para principiantes 25/100
ServiceNow/AgentLab#324 · 2 reacciones ·
Todos los issues de ServiceNow/AgentLab
Issues similares
-
changelog investigate
Dificultad 2/5 1-3 horas Aptitud para principiantes 67/100
ramnes/notion-sdk-py#433 ·
-
docs pkg:core
Dificultad 1/5 Menos de una hora Aptitud para principiantes 84/100
pydantic/pydantic-ai#11929 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
intake/intake-esm#789 ·
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 82/100
MemMachine/MemMachine#1877 ·
Los mantenedores suelen responder en 3 días
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100
openedx/openedx-authz#579 ·
Los mantenedores suelen responder en 1 día