Chủ sở hữu
llm-d
Đã lập chỉ mục 3 kho mã nguồn · Xem trên GitHub
-
llm-d
Achieve state of the art inference performance with modern accelerators on Kubernetes
Python · 4754 star
-
llm-d-router
llm-d Router: The intelligent entry point for inference requests
Go · 378 star
-
llm-d-inference-sim
A lightweight, configurable, and real-time simulator designed to mimic the behavior of vLLM without the need for GPUs or running actual h...
Go · 209 star
Các issue có thể đã có người làm được xếp cuối danh sách. Sắp xếp tất cả theo ngày
-
needs-triage
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 35/100
llm-d/llm-d-router#3407 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
enhancement
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 30/100
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 62/100
llm-d/llm-d-inference-sim#778 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
enhancement
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 15/100
llm-d/llm-d#2758 · 2 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Run CodeQL on pull requestsĐang mởarea/dev kind/test triage/accepted
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100
llm-d/llm-d-router#3353 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
needs-triage
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 30/100
llm-d/llm-d-router#3343 · 1 reaction ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 45/100
Maintainer thường phản hồi trong vòng 1 ngày
-
needs-triage
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 50/100
llm-d/llm-d-router#3308 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 22/100
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100
llm-d/llm-d#2699 · 5 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
needs-triage
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100
llm-d/llm-d-router#3221 · 4 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
needs-triage
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 45/100
llm-d/llm-d-router#3214 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 25/100
llm-d/llm-d-router#3205 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
[RFC] coordinator: make kv-offloading work (vLLM OffloadingConnector P2P tier)Có thể làm lại được @revit13 đã nhận 8 ngày trước và không có pull request nào đang mở. Đang mởarea/coordinator area/epp area/scheduling kind/feature needs-triage
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 32/100
llm-d/llm-d-router#3165 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Feature request: capacity-aware scoring based on per-endpoint occupancyCó thể làm lại được @satyamg1620 đã nhận 12 ngày trước và không có pull request nào đang mở. Đang mởneeds-triage
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100
llm-d/llm-d-router#3129 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 72/100
Maintainer thường phản hồi trong vòng 1 ngày
-
EPP: scrape vLLM NIXL transfer failure counters per endpointCó thể làm lại được @satyamg1620 đã nhận 14 ngày trước và không có pull request nào đang mở. Đang mởneeds-triage
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 65/100
llm-d/llm-d-router#3104 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
kind/bug needs-triage
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 55/100
llm-d/llm-d-router#3097 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 42/100
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 20/100
Maintainer thường phản hồi trong vòng 1 ngày
-
area/coordinator area/epp kind/feature needs-triage
Độ khó 1/5 1-3 giờ Mức phù hợp với người mới 84/100
llm-d/llm-d-router#3075 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Responses API e2e testsĐang mởneeds-triage
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 67/100
llm-d/llm-d-router#3059 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 45/100
llm-d/llm-d-router#3049 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
enhancement
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100
llm-d/llm-d#2584 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
needs-triage
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100
llm-d/llm-d-router#3030 · 6 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
enhancement
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100
llm-d/llm-d#2569 · 3 bình luận · 1 reaction ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100
llm-d/llm-d-router#2999 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100
llm-d/llm-d-router#2988 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Support sglang renderer backendCó thể làm lại được @bermanamit đã nhận 21 ngày trước và không có pull request nào đang mở. Đang mởneeds-triage sglang
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100
llm-d/llm-d-router#2982 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 48/100
llm-d/llm-d#2550 · 2 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
area/datalayer area/kvcache kind/feature
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 48/100
llm-d/llm-d-router#2959 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100
Maintainer thường phản hồi trong vòng 1 ngày
-
coordinator: report the prefill worker's cached-token count in decode usageCó thể đã có người làm @roytman đã nhận 1 ngày trước. Đang mởarea/coordinator needs-triage
llm-d/llm-d-router#3396 · 1 người được giao ·
Maintainer thường phản hồi trong vòng 1 ngày
-
--dataset-in-memory: concurrent requests fail with "no such table", and datasets over 256 MB crash at startupCó thể đã có người làm @mayabar đã nhận hôm nay. Đang mở
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 62/100
llm-d/llm-d-inference-sim#779 · 1 người được giao ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Add a LoRA scorer that prices adapter residency and evictionCó thể đã có người làm @atantawi đã nhận 1 ngày trước. Đang mởneeds-triage
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 18/100
llm-d/llm-d-router#3391 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
epp: no-hit-lru-scorer scores every used candidate 0 when its LRU holds other endpointsCó thể đã có người làm @hmdsefi đã nhận 1 ngày trước. Đang mởneeds-triage
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 70/100
llm-d/llm-d-router#3383 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
tracing: add OTEL_TRACES_ENABLED_SCOPES allowlist for selective recordingCó thể đã có người làm @codedbyadiiii đã nhận 2 ngày trước. Đang mởneeds-triage
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 65/100
llm-d/llm-d-router#3372 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
thunder-agent: tell subagent requests apart within a sessionCó thể đã có người làm @sudoalok đã nhận 1 ngày trước. Đang mởneeds-triage
llm-d/llm-d-router#3371 · 1 bình luận · 1 người được giao ·
Maintainer thường phản hồi trong vòng 1 ngày
-
[Bug][async-broker] enqueue keeps a request queued after the client disconnects without learning its idCó thể đã có người làm @vmanvs đã nhận 2 ngày trước. Đang mởkind/bug needs-triage
Độ khó 4/5 1-2 ngày Mức phù hợp với người mới 25/100
llm-d/llm-d-router#3362 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
lora-affinity-scorer starves a vLLM pod that has not served a request yet (MaxActiveModels reads as 0)Có thể đã có người làm @ptimizeroracle đã nhận 1 ngày trước. Đang mởneeds-triage
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 57/100
llm-d/llm-d-router#3361 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
guides: update precise prefix-cache routing guide with features from llm-d-router#2513Có thể đã có người làm @ahg-g đã nhận 2 ngày trước. Đang mở
llm-d/llm-d#2745 · 1 người được giao ·
Maintainer thường phản hồi trong vòng 1 ngày
-
gosec gate follow-ups: run in presubmit and after a govulncheck failureCó thể đã có người làm @hickeyma đã nhận 2 ngày trước. Đang mởarea/dev kind/test triage/accepted
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 75/100
llm-d/llm-d-router#3354 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Global flow control admission limits with multiple active EPP replicasCó thể đã có người làm @satyamg1620 đã nhận 2 ngày trước. Đang mởarea/epp area/flowcontrol kind/feature needs-triage
llm-d/llm-d-router#3348 · 3 bình luận · 1 người được giao ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Batch Redis syncer publishes per publication cycleCó thể đã có người làm @delete-cloud đã nhận 2 ngày trước. Đang mởarea/datalayer area/epp kind/performance needs-triage
llm-d/llm-d-router#3347 · 2 bình luận · 1 người được giao ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Connect EPP peer discovery to a CrossReplicaSyncerCó thể đã có người làm @sudoalok đã nhận 2 ngày trước. Đang mởarea/datalayer area/epp kind/feature needs-triage
llm-d/llm-d-router#3346 · 1 bình luận · 1 người được giao ·
Maintainer thường phản hồi trong vòng 1 ngày
Đang hiển thị 100 mục mới nhất
Trang này chỉ liệt kê những gì được lập chỉ mục gần đây. Bộ lọc nâng cao có toàn bộ kho, thu hẹp theo ngôn ngữ, độ khó và thời lượng.