/models REST endpoint lacks context size
Los mantenedores suelen responder en 1 día
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 3/5
- Tiempo estimado
- 1-2 días
- Aptitud para principiantes
- 68/100
Línea de trabajo
Start at the REST /v1/models endpoint and trace how its model metadata response is assembled. Compare the current response with the expected context-size fields shown in the report, then run the curl request against a configured model to verify that the context window is exposed and available to clients.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
Describe the bug
the models endpoint only shows the configured model name and a timestamp. the lack of a context window size makes it impossible for agentic software to know when to trigger auto-compaction.
To Reproduce
$ curl ovms_server:8081/v1/models
{"data":[{"id":"Ornith-1.5-35B-A3B-Uncensored-OpenVINO-INT4","object":"model","created":1790460054,"owned_by":"OVMS"}],"object":"list"}
Expected behavior
$curl llamacpp_server:8081/v1/models
{"object":"list","data":[{"id":"/home/user/models/offmonreal-Ornith-1.5-35B_Q4_K_M_imatrix_MTP.gguf","object":"model","created":1790459973,"owned_by":"llamacpp","meta":{"vocab_type":2,"n_vocab":248320,"n_ctx_train":262144,"n_embd":2048,"n_params":34660610688,"size":21155768832},"max_model_len":262144}],"models":[{"slug":"/home/user/models/offmonreal-Ornith-1.5-35B_Q4_K_M_imatrix_MTP.gguf","display_name":"/home/user/models/offmonreal-Ornith-1.5-35B_Q4_K_M_imatrix_MTP.gguf","description":null,"default_reasoning_level":null,"supported_reasoning_levels":[],"shell_type":"default","visibility":"list","supported_in_api":true,"priority":0,"additional_speed_tiers":[],"service_tiers":[],"default_service_tier":null,"availability_nux":null,"upgrade":null,"base_instructions":"","model_messages":null,"supports_reasoning_summaries":false,"default_reasoning_summary":"auto","support_verbosity":false,"default_verbosity":null,"apply_patch_tool_type":null,"web_search_tool_type":"text","truncation_policy":{"mode":"tokens","limit":262144},"supports_parallel_tool_calls":false,"supports_image_detail_original":false,"context_window":262144,"max_context_window":262144,"auto_compact_token_limit":235929,"effective_context_window_percent":95,"experimental_supported_tools":[],"input_modalities":["text"],"supports_search_tool":false,"use_responses_lite":false,"auto_review_model_override":null,"tool_mode":null,"multi_agent_version":null}]}
Logs
Logs from OVMS, ideally with --log_level DEBUG. Logs from client.
Configuration
2026.04 from last week
https://huggingface.co/vonvonhero/Ornith-1.5-35B-A3B-Uncensored-OpenVINO-INT4
Additional context
Add any other context about the problem here.
- Lenguaje dominante
- C++
- Estrellas
- 940
- Forks
- 278
- Merge medio
- 3 d 4 h
- PR fusionados (30 d)
- 68
Preparar el entorno
- Sin Dockerfile ni archivo de Docker Compose
- Tiene una plantilla de pull request
- Leer la guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de openvinotoolkit/model_server
-
Dificultad 3/5 1-2 días Aptitud para principiantes 58/100
openvinotoolkit/model_server#4613 · 1 asignado ·
Los mantenedores suelen responder en 1 día
-
Idle unload never happens again if the client disconnects while a sleeping graph is waking upPosiblemente ocupada @atobiszei la tomó hace 6 días. Abierto
openvinotoolkit/model_server#4603 · 1 asignado ·
Los mantenedores suelen responder en 1 día
-
bug
Dificultad 4/5 3-5 días Aptitud para principiantes 45/100
openvinotoolkit/model_server#4599 · 4 comentarios ·
Los mantenedores suelen responder en 1 día
-
Dificultad 3/5 1-2 días Aptitud para principiantes 55/100
openvinotoolkit/model_server#4586 · 5 comentarios ·
Los mantenedores suelen responder en 1 día
-
bug
Dificultad 4/5 3-5 días Aptitud para principiantes 52/100
openvinotoolkit/model_server#4580 · 8 comentarios ·
Los mantenedores suelen responder en 1 día
Todos los issues de openvinotoolkit/model_server
Issues similares
-
bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 84/100
Los mantenedores suelen responder en 1 día
-
ai_p2
Dificultad 2/5 1-3 horas Aptitud para principiantes 76/100
ClickHouse/ClickHouse#123351 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 88/100
stillwater-sc/universal#1617 · 1 comentario ·
Los mantenedores suelen responder en 1 día
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 78/100
keepassxreboot/keepassxc#13737 ·
Los mantenedores suelen responder en 1 día
-
Hexagon lifting issuesAbierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 72/100
Vector35/binaryninja-api#8621 · 1 comentario ·
Los mantenedores suelen responder en 2 días