Hacktoberfest 2026: những issue maintainer đã đánh dấu cho tháng Mười, đang mở và phù hợp người mới. Xem issue Hacktoberfest

Chủ sở hữu

deepspeedai

Đăng nhập để theo dõi

Đã lập chỉ mục 2 kho mã nguồn · Xem trên GitHub

Phù hợp cho người mới Tất cả
Đang mở Tất cả

Các issue có thể đã có người làm được xếp cuối danh sách. Sắp xếp tất cả theo ngày

  • [BUG] get_global_grad_norm() returns None with fp32 at ZeRO stage 0
    Đang mở
    • Có gì không ổn?

    Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 78/100

    deepspeedai/DeepSpeed#8660 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [BUG] Byte-view parameter broadcasts fail for zero-dimensional parameters
    Đang mở
    • Có gì không ổn?

    Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 65/100

    deepspeedai/DeepSpeed#8639 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Universal checkpoint conversion only knows Adam's state keys, so a Muon checkpoint cannot be converted
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100

    deepspeedai/DeepSpeed#8608 · 1 bình luận · 1 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • init_inference rejects dtype=torch.int8 on every accelerator
    Đang mở
    • Có gì không ổn?

    Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100

    deepspeedai/DeepSpeed#8577 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [BUG] Runtime configuration validation is bypassed under python -O
    Đang mở
    • Có gì không ổn?

    Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 68/100

    deepspeedai/DeepSpeed#8572 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • 2 tests fail: assert isinstance(model.llm[0], DistributedAttention)
    Đang mở
    • Có gì không ổn?

    Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 68/100

    deepspeedai/DeepSpeed#8554 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [BUG] AutoTP checkpoint load raises AttributeError on a model containing nn.InstanceNorm1d
    Đang mở
    • Có gì không ổn?

    Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 84/100

    deepspeedai/DeepSpeed#8514 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [BUG] Python checkpoint writers fail to reload full ZeRO-3 state with default torch.load
    Đang mở
    • Có gì không ổn?

    Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100

    deepspeedai/DeepSpeed#8500 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [BUG] ZeRO-3 ignores checkpoint tag when load_optimizer_states=False
    Đang mở
    • Có gì không ổn?

    Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 78/100

    deepspeedai/DeepSpeed#8499 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Deprecate unused DeepSpeed features
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 20/100

    deepspeedai/DeepSpeed#8489 · 6 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [BUG] Memory leak in loss backward when enabled torch activation checkpoint & zero3 & single-model-multi-branch network
    Đang mở
    • Có gì không ổn?
    bug training

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 48/100

    deepspeedai/DeepSpeed#8481 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Can't install in Python 3.14.6 with GCC
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100

    deepspeedai/DeepSpeed#8480 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [Bug] AutoEP FP32 gradient clipping averages norms across ranks with different expert ownership
    Đang mở
    • Có gì không ổn?
    bug training

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 32/100

    deepspeedai/DeepSpeed#8475 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [RFC] Enable Correct and High-Performance Muon Optimizer under ZeRO CPU Offload (Stage 1/2/3)
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

    deepspeedai/DeepSpeed#8463 · 1 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [FEATURE] Align decode fronts and trim dead zones in continuous batching
    Đang mở
    • Có gì không ổn?
    enhancement

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100

    deepspeedai/DeepSpeed#8462 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • AutoTP loads module weights by hardcoded class name, so 219 of 233 transformers norm classes are silently left on meta
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 45/100

    deepspeedai/DeepSpeed#8447 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Default gradient_clipping divides every Muon update by its own norm, shrinking the step by a model-sized factor
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100

    deepspeedai/DeepSpeed#8439 · 2 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Muon under AutoTP orthogonalizes each shard, so the update depends on the TP degree
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100

    deepspeedai/DeepSpeed#8437 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [BUG] Curriculum data sampler checkpoints the global numpy RNG, not its own, so resume replays the sampling stream
    Đang mở
    • Có gì không ổn?

    Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 68/100

    deepspeedai/DeepSpeed#8405 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • ZeRO-3 HybridMegatron QKV layout mutations are not persisted
    Đang mở
    • Có gì không ổn?

    Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 74/100

    deepspeedai/DeepSpeed#8391 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [BUG] set_norm_for_param_grad_in_gpu's grad_accum fallback is dead in both accumulation modes
    Đang mở
    • Có gì không ổn?

    Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 76/100

    deepspeedai/DeepSpeed#8371 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [Feature] Per-Head Muon: per-head Newton-Schulz orthogonalization for attention projections
    Đang mở
    • Có gì không ổn?
    enhancement training

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 45/100

    deepspeedai/DeepSpeed#8367 · 5 bình luận · 4 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • ZeRO-1/2 average_tensor serializes backward compute behind the preceding reduction
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100

    deepspeedai/DeepSpeed#8364 · 4 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [BUG]Unfreed parameters and unnecessary peak memory in autoEP
    Có thể làm lại được Đang mở
    • Có gì không ổn?
    bug training

    deepspeedai/DeepSpeed#8353 · 1 bình luận · 1 người được giao ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • HybridEngineRollout: synchronized early stopping across ZeRO-3 data-parallel ranks
    Có thể làm lại được Đang mở
    • Có gì không ổn?

    deepspeedai/DeepSpeed#8321 · 5 bình luận · 1 người được giao ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [REQUEST] XPU: register native pinned host memory with the device runtime (follow-up to #8283)
    Có thể làm lại được Đang mở
    • Có gì không ổn?

    deepspeedai/DeepSpeed#8315 · 1 bình luận · 2 reaction · 1 người được giao ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • HF transformers main injects 'embedding_rowwise' into tp_plan for tied-embedding models; AutoTP rejects the whole plan
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100

    deepspeedai/DeepSpeed#8290 · 3 bình luận · 1 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Define affine IR for checkpointing
    Có thể làm lại được Đang mở
    • Có gì không ổn?
    enhancement

    deepspeedai/DeepSpeed#8252 · 16 bình luận · 1 reaction · 1 người được giao ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [RFC] Universal checkpoint: non-semantic per-parameter geometric shard map
    Có thể làm lại được Đang mở
    • Có gì không ổn?

    deepspeedai/DeepSpeed#8230 · 10 bình luận · 1 reaction · 1 người được giao ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [REQUEST] OPSD Profile and improve HybridEngine rollout performance
    Đang mở
    • Có gì không ổn?
    enhancement

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 45/100

    deepspeedai/DeepSpeed#8197 · 17 bình luận · 1 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [REQUEST] Dynamic/Adaptive Prefetching Window for ZeRO-3
    Đang mở
    • Có gì không ổn?
    enhancement

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100

    deepspeedai/DeepSpeed#8193 · 3 bình luận · 1 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [RFC] Support sharding LM heads and adopting Online Softmax
    Đang mở
    • Có gì không ổn?
    enhancement

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

    deepspeedai/DeepSpeed#8173 · 5 bình luận · 2 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Add logging support for better observability
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100

    deepspeedai/DeepSpeed#8140 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • DeepSpeed - Q3 Roadmap
    Có thể làm lại được Đang mở
    • Có gì không ổn?
    roadmap

    deepspeedai/DeepSpeed#8104 · 6 bình luận · 9 reaction · 5 người được giao ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Consider adding a changelog to track version history
    Đang mở
    • Có gì không ổn?

    Độ khó 1/5 1-3 giờ Mức phù hợp với người mới 68/100

    deepspeedai/DeepSpeed#8101 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Exception type too broad in error handling
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 42/100

    deepspeedai/DeepSpeed#8093 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • zero.Init partitioning of large fused MoE-expert tensors spikes a single GPU (transient full materialization) -> OOM during load even when the sharded model fits
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 45/100

    deepspeedai/DeepSpeed#8085 · 4 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Add type hints to public API functions
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100

    deepspeedai/DeepSpeed#8074 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • EvoformerAttention should auto-detect CUTLASS instead of requiring CUTLASS_PATH
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 52/100

    deepspeedai/DeepSpeed#8001 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [BUG]Loss connection to ranks
    Đang mở
    • Có gì không ổn?
    bug training

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 45/100

    deepspeedai/DeepSpeed#7991 · 4 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [REQUEST] Add Trackio as a New Backend for Experiment Monitoring
    Đang mở
    • Có gì không ổn?
    enhancement

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 55/100

    deepspeedai/DeepSpeed#7964 · 4 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [BUG] crashed training gpt model using 3d parallelization
    Đang mở
    • Có gì không ổn?
    bug training

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100

    deepspeedai/DeepSpeed#7922 · 2 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [REQUEST] Put NVTX instrumentation in its own domain (and potentially categories)
    Đang mở
    • Có gì không ổn?
    enhancement

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 48/100

    deepspeedai/DeepSpeed#7912 · 3 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Trouble running tests: Failed to find precompiled modules
    Đang mở
    • Có gì không ổn?

    Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 74/100

    deepspeedai/DeepSpeed#7909 · 1 bình luận · 1 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Deepspeed zero 3 seems to save empty adapter_model.safetensors
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 28/100

    deepspeedai/DeepSpeed#7900 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [RFC] SDMA-Based Collective Communication Backend for ZeRO-3 on AMD GPUs
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100

    deepspeedai/DeepSpeed#7884 · 10 bình luận · 4 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [Roadmap] DeepSpeed Roadmap Q2 2026
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

    deepspeedai/DeepSpeed#7861 · 4 bình luận · 5 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [Bug] Missing input validation for fp16 loss_scale accepts float('inf')
    Đang mở
    • Có gì không ổn?
    bug training

    Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 55/100

    deepspeedai/DeepSpeed#7852 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [BUG] DeepSpeed ZeRO-3 deadlock in engine.step() at step 0 under 2-GPU execution (RTX 3090, torch 2.2.1, DS 0.14.2)
    Đang mở
    • Có gì không ổn?
    bug training

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

    deepspeedai/DeepSpeed#7844 · 8 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [BUG] DistributedAttention produces numerically incorrect results vs its own SeqAllToAll-equivalent baseline when sequence length is not divisible by world size
    Đang mở
    • Có gì không ổn?
    bug training

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 38/100

    deepspeedai/DeepSpeed#7842 · 5 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

Đang hiển thị 100 mục mới nhất

Trang này chỉ liệt kê những gì được lập chỉ mục gần đây. Bộ lọc nâng cao có toàn bộ kho, thu hẹp theo ngôn ngữ, độ khó và thời lượng.

Mở bộ lọc nâng cao

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.