Port GLiNER2.5 (fastino/gliner2.5-multi-v1) zero-shot NER to vllm.cpp
Los mantenedores suelen responder en 1 día
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 5/5
- Tiempo estimado
- Más de una semana
- Aptitud para principiantes
- 25/100
- Tipo de issue
- Nueva funcionalidad
- Claridad
- Bastante claro
- Estado de actividad
- Activo
- Stack tecnológico
- cpp
Línea de trabajo
Empieza con .agents/specs/gliner2.5.md y compara los componentes requeridos del encoder DeBERTa v2 y del pooler GLiNER2 con el oráculo de referencia de vllm-factory. Después, sigue el registro del modelo, el serving compatible con OpenAI y el backend de LocalAI; se considera terminado cuando se admite el alcance indicado de CPU, CUDA, ROCm, serving y registro.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
Port the GLiNER2.5 model (DeBERTa v2 encoder + disentangled attention + GLiNER2 pooler head) into vllm.cpp as the first encoder-only (BERT-class) model. vLLM has no DeBERTa support; the vllm-factory plugin (ddickmann/vllm-factory) is the reference oracle.
Scope: DeBERTa v2 encoder, GLiNER2 pooler head (SpanRep, CountLSTM, classifier), model registration, OpenAI-compatible serving, CPU + GPU (CUDA + ROCm) support, LocalAI backend.
Local issue: ISSUE-LOCAL-01M2TMQF230HKCX03RW6ADCVCT
Row: MODEL-GLINER25
Spec: .agents/specs/gliner2.5.md
- Lenguaje dominante
- C++
- Estrellas
- 423
- Forks
- 53
- Merge medio
- 1 d 7 h
- PR fusionados (30 d)
- 382
Preparar el entorno
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de mudler/vllm.cpp
-
[Windows] full build fails in tools/bench/conv1d_scaling_probe.cpp (POSIX-only sys/resource.h)Abierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 84/100
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 82/100
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 70/100
Los mantenedores suelen responder en 1 día
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 88/100
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 84/100
Los mantenedores suelen responder en 1 día
Todos los issues de mudler/vllm.cpp
Issues similares
-
area/actorsystem bug tsan
Dificultad 2/5 1-3 horas Aptitud para principiantes 74/100
ydb-platform/ydb#54282 ·
Los mantenedores suelen responder en 1 día
-
bug needs triage
Dificultad 1/5 Menos de una hora Aptitud para principiantes 90/100
project-chip/connectedhomeip#74434 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 88/100
tenstorrent/tt-metal#58057 · 1 comentario ·
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 84/100
maplibre/maplibre-native#4690 ·
Los mantenedores suelen responder en 1 día
-
comp-query-execution
Dificultad 2/5 1-3 horas Aptitud para principiantes 84/100
ClickHouse/ClickHouse#122569 ·
Los mantenedores suelen responder en 1 día