Hacktoberfest 2026: những issue maintainer đã đánh dấu cho tháng Mười, đang mở và phù hợp người mới. Xem issue Hacktoberfest

linkedin/Liger-Kernel

Đăng nhập để theo dõi Xem trên GitHub

Efficient Triton Kernels for LLM Training

linkedin/Liger-Kernel có thân thiện với người mới không?

Maintainer của linkedin/Liger-Kernel thường phản hồi pull request trong vòng 1 ngày. Hiện có 2 issue phù hợp với người mới đang mở.

Star
6.6k
Fork
603
Issue cho người mới đang mở
2
Issue đã lập chỉ mục
114
Merge trung bình
2 ngày 20 giờ
Pull request đã merge (30 ngày)
43
Ngôn ngữ chính
Python
Giấy phép
BSD-2-Clause
Lần push lên GitHub gần nhất
18/9/2026
Lập chỉ mục gần nhất
19/9/2026
Hướng dẫn đóng góp
Không có quy tắc ứng xử
Label cho người mới
help wanted good first issue

Cách đóng góp cho linkedin/Liger-Kernel

  1. Hãy đọc hướng dẫn đóng góp trước: nó cho biết maintainer muốn thay đổi được đề xuất, kiểm thử và review ra sao.
  2. Đóng góp của bạn sẽ được phát hành theo giấy phép BSD-2-Clause của dự án.
  3. Chọn một trong 2 issue phù hợp với người mới đang mở bên dưới và bình luận rằng bạn muốn làm nó trước khi bắt đầu.
Phù hợp cho người mới Tất cả
Đang mở Tất cả

Các issue có thể đã có người làm được xếp cuối danh sách. Sắp xếp tất cả theo ngày

  • [Megatron] apply_liger_kernel_to_megatron(cross_entropy=True) does not reach Megatron's CE call sites
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 52/100

    linkedin/Liger-Kernel#1485 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [NPU] Track reverting Ascend Atlas 950 workarounds after triton-ascend upstream fixes (#1464)
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100

    linkedin/Liger-Kernel#1481 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • JSD kernel returns NaN for interior beta when a vocabulary entry underflows under both distributions
    Đang mở
    • Có gì không ổn?

    Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 76/100

    linkedin/Liger-Kernel#1453 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • fused_linear_jsd rounds logits to the input dtype before the documented FP32 cast, costing up to 23% gradient error in bf16
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100

    linkedin/Liger-Kernel#1432 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [RFC] Migrate Nvidia CI from Modal to HF Jobs
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

    linkedin/Liger-Kernel#1393 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [RFC] Testing Methodology for FP32 Convergence Tests on Fused SwiGLU/dSwiGLU Kernels
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100

    linkedin/Liger-Kernel#1383 · 1 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Add Liger kernels + FLCE `token_accuracy` plumbing for Muse Glimmer (`muse_glimmer`)
    Có thể làm lại được Đang mở
    • Có gì không ổn?

    linkedin/Liger-Kernel#1378 · 2 bình luận · 1 reaction · 1 người được giao ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • LigerGroupNorm backward writes out of bounds and then raises for any input with more than 3 dimensions
    Đang mở
    • Có gì không ổn?

    Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 72/100

    linkedin/Liger-Kernel#1375 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • LigerTVDLoss returns a non-zero gradient where p == q
    Đang mở
    • Có gì không ổn?

    Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 84/100

    linkedin/Liger-Kernel#1373 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [RFC] Full-pipeline SwiGLU MLP with forward/backward co-optimization
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 30/100

    linkedin/Liger-Kernel#1347 · 6 bình luận · 1 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • llama4_rope / qwen2vl_mrope kernels missing the int64 program_id cast that #804 added to rope.py/rms_norm.py
    Đang mở
    • Có gì không ổn?

    Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 70/100

    linkedin/Liger-Kernel#1335 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [B300/SM103] Compiled Liger SwiGLU is ~3.1x slower than torch.compile for a Qwen3-shaped BF16 tensor
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 48/100

    linkedin/Liger-Kernel#1330 · 2 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • `torch.compile` fails with FLCE due to `aten.addmm.dtype_out` overload
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 45/100

    linkedin/Liger-Kernel#1327 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Reduce FLCE weight-gradient allocation overhead across FP16, BF16, and FP32
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 52/100

    linkedin/Liger-Kernel#1323 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Support GMPO Chunked loss
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 45/100

    linkedin/Liger-Kernel#1315 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Support Gemma 4 Unified (`gemma4_unified`) — kernel patching + fused linear cross-entropy
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 57/100

    linkedin/Liger-Kernel#1308 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Triton kernels can launch on the wrong GPU with multi-GPU inputs
    Đang mở
    • Có gì không ổn?

    Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 65/100

    linkedin/Liger-Kernel#1303 · 1 bình luận · 2 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • pyproject.toml has no requires-python — pip installs on any interpreter; publish workflows disagree (3.8 vs 3.10)
    Đang mở
    • Có gì không ổn?

    Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 55/100

    linkedin/Liger-Kernel#1302 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Fused MoE kernels crash on Qwen3.5-397B (int32 offset overflow)
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 48/100

    linkedin/Liger-Kernel#1296 · 1 bình luận · 2 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Add Qwen2.5-Omni support
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

    linkedin/Liger-Kernel#1295 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Feature Request: Add THD / Packed-Sequence Training Support
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 28/100

    linkedin/Liger-Kernel#1281 · 2 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Suggestion: per-kernel roofline/bandwidth-efficiency benchmarks in docs
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 48/100

    linkedin/Liger-Kernel#1272 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • LigerORPOTrainer doesn't work when not using FSDP
    Đang mở
    • Có gì không ổn?

    Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 65/100

    linkedin/Liger-Kernel#1229 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Add fused Modulated RMSNorm for DiT-style scale/shift conditioning
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 45/100

    linkedin/Liger-Kernel#1224 · 5 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [RFC] Add Monitoring Interface for External Logging Backends
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 30/100

    linkedin/Liger-Kernel#1213 · 3 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [New backend] cuTile backend for Liger kernels — performance data on B200 + integration interest
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

    linkedin/Liger-Kernel#1205 · 1 bình luận · 4 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Gemma4 text model support
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100

    linkedin/Liger-Kernel#1186 · 5 bình luận · 5 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Glm4vConfig object has no attribute 'hidden_size'
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100

    linkedin/Liger-Kernel#1152 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • LigerFusedLinearGRPOLoss produces ~100x larger grad_norm than TRL's non-Liger-Kernel path due to missing vLLM IS correction and other differences
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 42/100

    linkedin/Liger-Kernel#1082 · 11 bình luận · 1 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Skip dW/dB computation in norm ops when weight/bias is frozen (LoRA/PEFT optimization)
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 48/100

    linkedin/Liger-Kernel#1067 · 1 bình luận · 1 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [RFC] Standardized Model Config for Benchmarks
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

    linkedin/Liger-Kernel#1051 · 6 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Compatibility issue between liger-kernel and zero3: The size of tensor a (0) must match the size of tensor b (4096) at non-singleton dimension 1
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100

    linkedin/Liger-Kernel#1048 · 1 bình luận · 1 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [NPU] Improve the performance of the embedding for NPU
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

    linkedin/Liger-Kernel#1036 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Fatal Python error when using Liger Kernel with Qwen-VL fine-tuning: `none_dealloc: deallocating None` at step ~875
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

    linkedin/Liger-Kernel#975 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [NPU Roadmap, Updated to 2026-Q2] NPU support for Liger-Kernel
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

    linkedin/Liger-Kernel#969 · 32 bình luận · 17 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Moe kernel for latest transformers v5
    Có thể làm lại được Đang mở
    • Có gì không ổn?

    linkedin/Liger-Kernel#958 · 4 bình luận · 5 reaction · 1 người được giao ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [Feature Request] Add SwiGLU support for Qwen3-VL models
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 48/100

    linkedin/Liger-Kernel#956 · 1 bình luận · 1 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [RFC] Native Ascend NPU Support for Liger Kernel
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

    linkedin/Liger-Kernel#954 · 2 bình luận · 24 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Add GLM-4.5 MoE
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100

    linkedin/Liger-Kernel#951 · 1 bình luận · 1 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • 0.6.3 can not find unpack_cross_entropy_result in liger_kernel.transformers.model.loss_utils
    Đang mở
    • Có gì không ổn?

    Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 25/100

    linkedin/Liger-Kernel#944 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • [Question] No gain in VRAM usage with LigerFusedLinearCrossEntropyLoss
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100

    linkedin/Liger-Kernel#941 · 3 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Another MLP implementation along with multiplier support
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100

    linkedin/Liger-Kernel#937 · 3 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Investigate Helion for kernel authoring/tuning
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

    linkedin/Liger-Kernel#923 · 3 bình luận · 1 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Check if cross entropy is applied correctly in all monkey patch functions
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 45/100

    linkedin/Liger-Kernel#920 · 1 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • FusedLinearCrossEntropy got illegal memory access issue with triton 3.5.0 and PyTorch 2.9
    Đang mở
    • Có gì không ổn?

    Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 25/100

    linkedin/Liger-Kernel#916 · 3 bình luận ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Support for Qwen3-VL models
    Có thể làm lại được Đang mở
    • Có gì không ổn?
    high-priority

    linkedin/Liger-Kernel#897 · 16 bình luận · 14 reaction · 1 người được giao ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • TiledMLP
    Đang mở
    • Có gì không ổn?
    help wanted

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 30/100

    linkedin/Liger-Kernel#893 · 13 bình luận · 1 reaction ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • 【FLCE】the bias in the previous layer
    Đang mở
    • Có gì không ổn?

    Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 45/100

    linkedin/Liger-Kernel#891 ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Support PyTorch Tensor Parallelism
    Có thể làm lại được Đang mở
    • Có gì không ổn?

    linkedin/Liger-Kernel#868 · 1 người được giao ·

    Maintainer thường phản hồi trong vòng 1 ngày

  • Multi-token attention
    Đang mở
    • Có gì không ổn?

    Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

    linkedin/Liger-Kernel#857 ·

    Maintainer thường phản hồi trong vòng 1 ngày

Đang hiển thị 100 mục mới nhất

Trang này chỉ liệt kê những gì được lập chỉ mục gần đây. Bộ lọc nâng cao có toàn bộ kho, thu hẹp theo ngôn ngữ, độ khó và thời lượng.

Mở bộ lọc nâng cao

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.