Chủ sở hữu

NovaSky-AI

Đã lập chỉ mục 1 kho mã nguồn · Xem trên GitHub

SkyRL
SkyRL: A Modular Full-stack RL Library for LLMs

Python · 2339 star

Đang mở Tất cả

pad_training_input_batch pads TensorList fields with tensor[0].clone() — loss-masked pad rows carry a real row's payload (ragged-consumer crash; wrong pixel_values/image_grid_thw on pad rows) Đang mở

Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 82/100

NovaSky-AI/SkyRL#2263 · Mở ngày 22/9/2026
fully_async (non-colocated): training actor emits all-NaN logits on every microbatch of the first step after the first NCCL weight sync; weights/optimizer/exports all finite Đang mở

Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 38/100

NovaSky-AI/SkyRL#2247 · Mở ngày 19/9/2026
fully_async: non-colocated weight sync ignores clear_kv_cache_on_weight_sync — stale prefix-cache KV trained on after each sync Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 68/100

NovaSky-AI/SkyRL#2246 · Mở ngày 19/9/2026
[bug][fsdp] FSDP2 manual offload/load corrupts DTensor unshard state under `colocate_all=True`, causing silent non-deterministic logit errors Đang mở

NovaSky-AI/SkyRL#2215 · 1 bình luận · 1 người được giao · Mở ngày 16/9/2026
[feature] Honor max_tokens_per_microbatch in the loss-path forward (forward with loss_fn) Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 68/100

NovaSky-AI/SkyRL#2211 · Mở ngày 15/9/2026
[weight sync] Improve offload/backload semantics while training with LoRA with `colocate_all=True` Đang mở

NovaSky-AI/SkyRL#2206 · 1 người được giao · Mở ngày 14/9/2026
Support full-distribution comparison to validate bitwise consistency between rollout and training Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 52/100

NovaSky-AI/SkyRL#2201 · 1 bình luận · Mở ngày 12/9/2026
[tinker] Retain only the K most recent checkpoints Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 45/100

NovaSky-AI/SkyRL#2116 · Mở ngày 1/9/2026
[train] FSDP2 cannot train glm4v VLMs: per-nn.Embedding fully_shard leaves vision position_embedding sharded at raw .weight read (grid_sample DTensor crash) Đang mở

Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 55/100

NovaSky-AI/SkyRL#2087 · Mở ngày 22/8/2026
Multi-turn VLM generator corrupts trajectories for all thinking models: history-editing chat templates break the deferred obs-token offsets Đang mở

Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

NovaSky-AI/SkyRL#2075 · Mở ngày 21/8/2026
[deps] Migrate custom vLLM-router fork on top of 0.1.15 release of vllm-router Đang mở

NovaSky-AI/SkyRL#2070 · 1 bình luận · 1 người được giao · Mở ngày 19/8/2026
[vllm] Remove old inference worker wrap code after 0.26.0 update Đang mở

NovaSky-AI/SkyRL#2020 · 2 người được giao · Mở ngày 12/8/2026
[examples] Add example startup scripts for tinker engine Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 63/100

NovaSky-AI/SkyRL#1983 · 1 bình luận · Mở ngày 4/8/2026
Qwen3.6-27B MTP is unsafe with prefix caching enabled Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 50/100

NovaSky-AI/SkyRL#1981 · Mở ngày 4/8/2026
[dependencies] migrate to uv official wheels Đang mở

Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100

NovaSky-AI/SkyRL#1975 · 1 bình luận · Mở ngày 3/8/2026
[RFC] SkyRL TITO Proxy Đang mở

Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

NovaSky-AI/SkyRL#1959 · 4 bình luận · Mở ngày 29/7/2026
[usability] Improve SkyRL cold start time Đang mở

Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100

NovaSky-AI/SkyRL#1954 · 1 bình luận · Mở ngày 28/7/2026
[frontend] Support tinker as a backend for SkyRL's frontend training code Đang mở

Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100

NovaSky-AI/SkyRL#1949 · 1 bình luận · 2 reaction · Mở ngày 27/7/2026
SkyRL quantization (FP8, MXFP8, NVFP4) tracker Đang mở

Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

NovaSky-AI/SkyRL#1943 · Mở ngày 24/7/2026
[RFC] Delta weight sync in SkyRL Đang mở

NovaSky-AI/SkyRL#1903 · 1 người được giao · Mở ngày 15/7/2026
skyrl-v0-8b-agent Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100

NovaSky-AI/SkyRL#1885 · Mở ngày 13/7/2026
[CI] Some CPU-only megatron tests are skipped in CPU CI Đang mở

NovaSky-AI/SkyRL#1881 · 1 người được giao · Mở ngày 10/7/2026
[tinker] Colocated sampling runs in run-to-completion batches — multi-turn RL sees ~8x sampling latency Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 45/100

NovaSky-AI/SkyRL#1877 · 1 reaction · Mở ngày 9/7/2026
FSDP token-based `forward_backward` returns `loss_fn_outputs` in packed order when max_tokens_per_microbatch > 0 Đang mở

NovaSky-AI/SkyRL#1865 · 1 bình luận · 1 reaction · 1 người được giao · Mở ngày 5/7/2026
skyrl-v0-8b experiments Đang mở

Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 35/100

NovaSky-AI/SkyRL#1864 · Mở ngày 5/7/2026
Multimodal Tinker sampling with LoRA 404s: _render_for_sample posts the adapter name to /v1/chat/completions/render Đang mở

Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 74/100

NovaSky-AI/SkyRL#1860 · 1 bình luận · Mở ngày 1/7/2026
HF/FSDP backend: pass `logits_to_keep` to avoid materializing full logits tensor Đang mở

Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 72/100

NovaSky-AI/SkyRL#1858 · 1 bình luận · Mở ngày 1/7/2026
SkyRL Q3 2026 Roadmap Đang mở

Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 20/100

NovaSky-AI/SkyRL#1846 · 8 bình luận · 7 reaction · Mở ngày 29/6/2026
[algorithm] Add adaptive entropy methods (ADAPO, REPO-R, MAI-Thinking) Đang mở

Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 25/100

NovaSky-AI/SkyRL#1845 · Mở ngày 29/6/2026
[tinker] cascading distributed barrier timeouts with multi-tenant LoRA Đang mở

NovaSky-AI/SkyRL#1827 · 1 người được giao · Mở ngày 23/6/2026
Fix reduction for entropy and other metrics in policy workers Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 55/100

NovaSky-AI/SkyRL#1822 · 1 bình luận · Mở ngày 22/6/2026
adv_estimator (function param) vs advantage_estimator (config field) naming mismatch causes confusing startup crash Đang mở

Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 76/100

NovaSky-AI/SkyRL#1792 · Mở ngày 16/6/2026
[LoRA] Investigate LoRA training inference mismatch for Qwen3.6 MoE and GLM-4.7-Flash Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100

NovaSky-AI/SkyRL#1776 · 2 bình luận · 2 reaction · Mở ngày 10/6/2026
[fsdp] monitor FSDP training stability regression after #1679 Đang mở

NovaSky-AI/SkyRL#1767 · 2 bình luận · 1 người được giao · Mở ngày 9/6/2026
Example for training on SWE (agentic software-engineering) tasks? Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 38/100

NovaSky-AI/SkyRL#1757 · 1 bình luận · Mở ngày 7/6/2026
[feature] Add ECHO patch to SkyRL Đang mở

Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100

NovaSky-AI/SkyRL#1715 · 1 bình luận · Mở ngày 28/5/2026
[CI] Add GLM 4.7 to Megatron Models CI Đang mở

Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 72/100

NovaSky-AI/SkyRL#1681 · Mở ngày 17/5/2026
`create_ray_wrapped_inference_engines` drops the engine-core child's root cause on init failure Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 55/100

NovaSky-AI/SkyRL#1673 · Mở ngày 15/5/2026
`RemoteInferenceEngine` swallows vLLM's 404, surfaces as opaque `IndexError` Đang mở

Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 68/100

NovaSky-AI/SkyRL#1672 · 1 bình luận · Mở ngày 15/5/2026
[tinker] SkyRLTrainBackend tinker multi-tenancy improvements Đang mở

NovaSky-AI/SkyRL#1654 · 1 người được giao · Mở ngày 12/5/2026
[tinker] Support additional Tinker LoraConfig parameters Đang mở

Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 65/100

NovaSky-AI/SkyRL#1632 · Mở ngày 7/5/2026
[vllm] Investigate whether NCCL_CUMEM_ENABLE should be set to 0 Đang mở

Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 35/100

NovaSky-AI/SkyRL#1630 · Mở ngày 7/5/2026
`SkyRLGymGenerator` crashes whole training step when one rollout fails Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 55/100

NovaSky-AI/SkyRL#1613 · 1 reaction · Mở ngày 2/5/2026
`RayPPOTrainer._remove_tail_data` silently truncates a training batch to empty and throws `ValueError` Đang mở

Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100

NovaSky-AI/SkyRL#1609 · Mở ngày 1/5/2026
Flaky test_qwen3_moe_layer_lora, replace np.allclose? Đang mở

Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 68/100

NovaSky-AI/SkyRL#1604 · Mở ngày 30/4/2026
SkyRL silently binds every FSDP policy worker to GPU 0 when Ray doesn't isolate `CUDA_VISIBLE_DEVICES` Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 48/100

NovaSky-AI/SkyRL#1577 · 3 bình luận · Mở ngày 27/4/2026
[tx] Kimi K2.5 and Kimi K2.6 support Đang mở

NovaSky-AI/SkyRL#1566 · 1 bình luận · 3 reaction · 1 người được giao · Mở ngày 23/4/2026
Gemma 4 training fails as `flash-attn` rejects `head_dim=512` on global attention layers Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 45/100

NovaSky-AI/SkyRL#1564 · 1 bình luận · Mở ngày 23/4/2026
`policy.language_model_only=True` fails to exclude vision/audio towers from the FSDP policy for `google/gemma-4-E4B-it`, crashing FSDP2 init Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 50/100

NovaSky-AI/SkyRL#1559 · Mở ngày 22/4/2026
Ensure sample_packing support for Qwen3.5 for FSDP2 and Megatron Đang mở

Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100

NovaSky-AI/SkyRL#1525 · 3 bình luận · Mở ngày 16/4/2026

Đang hiển thị 100 mục mới nhất

Trang này chỉ liệt kê những gì được lập chỉ mục gần đây. Bộ lọc nâng cao có toàn bộ kho, thu hẹp theo ngôn ngữ, độ khó và thời lượng.

Mở bộ lọc nâng cao

NovaSky-AI

Đang hiển thị 100 mục mới nhất

Nhận issue mới trong hộp thư của bạn