Issues do repositório
vllm-project/vllm
A high-throughput and memory-efficient inference and serving engine for LLMs
Issues
Aberta
[Docs] Document NIXL KV connector metrics aggregation semantics
good first issue
Tem label amigável para iniciantesGuia de contribuição disponível
8 comentários1 reação1 responsável
Aberta
[Feature]: Integrate fused `kMoEFinalizeARResidualRMSNorm` from FlashInfer
feature requesthelp wanted
Por que recomendamosAinda sem responsável · Tem label amigável para iniciantes
Ainda sem responsávelTem label amigável para iniciantesGuia de contribuição disponível
5 comentários1 reação0 responsável
Aberta
[Feature]: Priority scheduling supports preemption of requests in the running queue by requests in the waiting queue
feature requesthelp wanted
Por que recomendamosAinda sem responsável · Tem label amigável para iniciantes
Ainda sem responsávelTem label amigável para iniciantesGuia de contribuição disponível
6 comentários0 reação0 responsável
Aberta
[torch.compile] config hashing refactor follow-ups
feature requestgood first issuehelp wanted
Por que recomendamosTem label amigável para iniciantes · Guia de contribuição disponível
Tem label amigável para iniciantesGuia de contribuição disponível
16 comentários0 reação3 responsáveis
Aberta
[torch.compile] E2E correctness testing for fusions
help wantedtorch.compile
Por que recomendamosAinda sem responsável · Tem label amigável para iniciantes
Ainda sem responsávelTem label amigável para iniciantesGuia de contribuição disponível
8 comentários0 reação0 responsável
Aberta
[Bug]: Certain Ranks Take a Look Time to Load Weights
bughelp wanted
Por que recomendamosAinda sem responsável · Tem label amigável para iniciantes
Ainda sem responsávelTem label amigável para iniciantesGuia de contribuição disponível
3 comentários0 reação0 responsável
Aberta
[Transformers v5] InternVL2
good first issuehelp wanted
Por que recomendamosAinda sem responsável · Tem label amigável para iniciantes
Ainda sem responsávelTem label amigável para iniciantesGuia de contribuição disponível
5 comentários0 reação0 responsável
Aberta
Upgrade to Transformers v5
help wanted
Por que recomendamosTem label amigável para iniciantes · Guia de contribuição disponível
Tem label amigável para iniciantesGuia de contribuição disponível
4 comentários13 reações1 responsável
Aberta
[Feature]: Better Flashinfer compilation logging
feature requesthelp wanted
Por que recomendamosAinda sem responsável · Tem label amigável para iniciantes
Ainda sem responsávelTem label amigável para iniciantesGuia de contribuição disponível
9 comentários0 reação0 responsável
Aberta
[RFC]: Support ViT Full CUDA Graph (Tracker)
RFChelp wantedmulti-modality
Por que recomendamosAinda sem responsável · Tem label amigável para iniciantes
Ainda sem responsávelTem label amigável para iniciantesGuia de contribuição disponível
23 comentários1 reação0 responsável
Aberta
[Feature]: Unify MoE "Oracles" with Class Structure
feature requestgood first issuehelp wanted
Por que recomendamosTem label amigável para iniciantes · Guia de contribuição disponível
Tem label amigável para iniciantesGuia de contribuição disponível
8 comentários0 reação1 responsável
Aberta
[Feature]: Upstream DGX spark improvements from Avarok-Cybersecurity/dgx-vllm
feature requesthelp wantednvidiaquantization
Por que recomendamosAinda sem responsável · Tem label amigável para iniciantes
Ainda sem responsávelTem label amigável para iniciantesGuia de contribuição disponível
13 comentários1 reação0 responsável
Aberta
[Roadmap]: PD Disaggregation with `NixlConnector` Roadmap
feature requesthelp wanted
Por que recomendamosAinda sem responsável · Tem label amigável para iniciantes
Ainda sem responsávelTem label amigável para iniciantesGuia de contribuição disponível
5 comentários15 reações0 responsável
Aberta
[Feature]: Remove attention layer name from `unified_kv_cache_update`
feature requestgood first issuehelp wantedstalestartup-uxtorch.compile
Por que recomendamosTem label amigável para iniciantes · Guia de contribuição disponível
Tem label amigável para iniciantesGuia de contribuição disponível
8 comentários1 reação2 responsáveis
Aberta
[Bug]: Wrong timestamps if audio > 30s
buggood first issuehelp wanted
Por que recomendamosTem label amigável para iniciantes · Guia de contribuição disponível
Tem label amigável para iniciantesGuia de contribuição disponível
11 comentários1 reação2 responsáveis
Aberta
[Feature]: Extract KV-Cache update from all attention backends
feature requestgood first issuehelp wanted
Por que recomendamosTem label amigável para iniciantes · Guia de contribuição disponível
Tem label amigável para iniciantesGuia de contribuição disponível
51 comentários0 reação9 responsáveis
Aberta
[Feature]: Refactor Int8ScaledMMLinearLayerConfig to use QuantKey
feature requestgood first issuehelp wanted
Por que recomendamosTem label amigável para iniciantes · Guia de contribuição disponível
Tem label amigável para iniciantesGuia de contribuição disponível
7 comentários0 reação1 responsável
Aberta
[Feature]: Use kernel abstraction for fp4 scaled mm
feature requesthelp wantedunstale
Por que recomendamosTem label amigável para iniciantes · Guia de contribuição disponível
Tem label amigável para iniciantesGuia de contribuição disponível
12 comentários0 reação1 responsável
Aberta
[Feature]: Error Logging Redesign
feature requesthelp wanted
Por que recomendamosTem label amigável para iniciantes · Guia de contribuição disponível
Tem label amigável para iniciantesGuia de contribuição disponível
7 comentários0 reação1 responsável
Aberta
[Bug]: ModelOpt Llama-4 Checkpoints Take 5+ minutes to load
bugfeature requestgood first issuehelp wanted
Por que recomendamosAinda sem responsável · Tem label amigável para iniciantes
Ainda sem responsávelTem label amigável para iniciantesGuia de contribuição disponível
12 comentários0 reação0 responsável