[Feature] Modify expansion of `BaseRetriever` to match `BaseGenerator` for multimodal considerations
@CalculusC ya está trabajando en esto.
Desde el 8/7/2025.
Evaluación
Este issue todavía no se ha evaluado.
Descripción
Tasks:
- Update
fed_rag.base.retrieverto useQueryandContext - Update
fed_rag.base.retrieverto return a new encoder type that flexible accepts separate encoders for text and image (audio and video later) - Update
fed_rag.retrievers.hf_sentence_transformerto be able to take inQueryandContextinputs — ignoring the other modalities, namely image (audio and video later).
- Lenguaje dominante
- Python
- Estrellas
- 150
- Forks
- 29
- Métricas de merge de PR
- Sin PR fusionados en 30 d
Preparar el entorno
- Sin Dockerfile ni archivo de Docker Compose
- Tiene una plantilla de pull request
- Leer la guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de VectorInstitute/fed-rag
-
multimodal
Dificultad 4/5 3-5 días Aptitud para principiantes 35/100
VectorInstitute/fed-rag#496 ·
-
multimodal
Dificultad 5/5 Más de una semana Aptitud para principiantes 15/100
VectorInstitute/fed-rag#495 ·
-
multimodal
Dificultad 5/5 Más de una semana Aptitud para principiantes 20/100
VectorInstitute/fed-rag#494 ·
-
[Feature] Expand `BaseKnowledgeStore` to accept multi-modal inputs when retrieving.Posiblemente ocupada @Izukimat la tomó hace 463 días. Abiertomultimodal
VectorInstitute/fed-rag#493 · 1 asignado ·
-
[Feature] Add HFMultiModalRetrieverQuizá libre de nuevo @nerdai la tomó hace 463 días y no hay ningún pull request abierto. Abiertoenhancement multimodal p0
VectorInstitute/fed-rag#492 · 1 asignado ·
Todos los issues de VectorInstitute/fed-rag
Issues similares
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100
google-agentic-commerce/AP2#388 ·
-
area:codegen backend:cuda backend:hip bug direction:input
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
CrossGL/crosstl#3061 · 1 comentario ·
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 85/100
rlaope/oh-my-hermes#2304 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 85/100
mochan-tk/agentic-dev-kit-for-codex#64 ·
Los mantenedores suelen responder en 1 día
-
Windows ARM memory-leakAbiertobug docs performance
Dificultad 1/5 Menos de una hora Aptitud para principiantes 85/100
Los mantenedores suelen responder en 3 días