Proprietario

NovaSky-AI

1 repository indicizzato · Vedi su GitHub

SkyRL
SkyRL: A Modular Full-stack RL Library for LLMs

Python · 2339 stelle

Adatte ai principianti Tutto

Aperta Tutte

pad_training_input_batch pads TensorList fields with tensor[0].clone() — loss-masked pad rows carry a real row's payload (ragged-consumer crash; wrong pixel_values/image_grid_thw on pad rows) Aperta

Difficoltà 2/5 1-3 ore Idoneità per principianti 82/100

NovaSky-AI/SkyRL#2263 · Aperta il 22/9/2026
fully_async (non-colocated): training actor emits all-NaN logits on every microbatch of the first step after the first NCCL weight sync; weights/optimizer/exports all finite Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 38/100

NovaSky-AI/SkyRL#2247 · Aperta il 19/9/2026
fully_async: non-colocated weight sync ignores clear_kv_cache_on_weight_sync — stale prefix-cache KV trained on after each sync Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 68/100

NovaSky-AI/SkyRL#2246 · Aperta il 19/9/2026
[bug][fsdp] FSDP2 manual offload/load corrupts DTensor unshard state under `colocate_all=True`, causing silent non-deterministic logit errors Aperta

NovaSky-AI/SkyRL#2215 · 1 commento · 1 assegnatario · Aperta il 16/9/2026
[feature] Honor max_tokens_per_microbatch in the loss-path forward (forward with loss_fn) Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 68/100

NovaSky-AI/SkyRL#2211 · Aperta il 15/9/2026
[weight sync] Improve offload/backload semantics while training with LoRA with `colocate_all=True` Aperta

NovaSky-AI/SkyRL#2206 · 1 assegnatario · Aperta il 14/9/2026
Support full-distribution comparison to validate bitwise consistency between rollout and training Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 52/100

NovaSky-AI/SkyRL#2201 · 1 commento · Aperta il 12/9/2026
[tinker] Retain only the K most recent checkpoints Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 45/100

NovaSky-AI/SkyRL#2116 · Aperta il 1/9/2026
[train] FSDP2 cannot train glm4v VLMs: per-nn.Embedding fully_shard leaves vision position_embedding sharded at raw .weight read (grid_sample DTensor crash) Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 55/100

NovaSky-AI/SkyRL#2087 · Aperta il 22/8/2026
Multi-turn VLM generator corrupts trajectories for all thinking models: history-editing chat templates break the deferred obs-token offsets Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

NovaSky-AI/SkyRL#2075 · Aperta il 21/8/2026
[deps] Migrate custom vLLM-router fork on top of 0.1.15 release of vllm-router Aperta

NovaSky-AI/SkyRL#2070 · 1 commento · 1 assegnatario · Aperta il 19/8/2026
[vllm] Remove old inference worker wrap code after 0.26.0 update Aperta

NovaSky-AI/SkyRL#2020 · 2 assegnatari · Aperta il 12/8/2026
[examples] Add example startup scripts for tinker engine Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 63/100

NovaSky-AI/SkyRL#1983 · 1 commento · Aperta il 4/8/2026
Qwen3.6-27B MTP is unsafe with prefix caching enabled Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 50/100

NovaSky-AI/SkyRL#1981 · Aperta il 4/8/2026
[dependencies] migrate to uv official wheels Aperta

Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100

NovaSky-AI/SkyRL#1975 · 1 commento · Aperta il 3/8/2026
[RFC] SkyRL TITO Proxy Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

NovaSky-AI/SkyRL#1959 · 4 commenti · Aperta il 29/7/2026
[usability] Improve SkyRL cold start time Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

NovaSky-AI/SkyRL#1954 · 1 commento · Aperta il 28/7/2026
[frontend] Support tinker as a backend for SkyRL's frontend training code Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

NovaSky-AI/SkyRL#1949 · 1 commento · 2 reazioni · Aperta il 27/7/2026
SkyRL quantization (FP8, MXFP8, NVFP4) tracker Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

NovaSky-AI/SkyRL#1943 · Aperta il 24/7/2026
[RFC] Delta weight sync in SkyRL Aperta

NovaSky-AI/SkyRL#1903 · 1 assegnatario · Aperta il 15/7/2026
skyrl-v0-8b-agent Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

NovaSky-AI/SkyRL#1885 · Aperta il 13/7/2026
[CI] Some CPU-only megatron tests are skipped in CPU CI Aperta

NovaSky-AI/SkyRL#1881 · 1 assegnatario · Aperta il 10/7/2026
[tinker] Colocated sampling runs in run-to-completion batches — multi-turn RL sees ~8x sampling latency Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 45/100

NovaSky-AI/SkyRL#1877 · 1 reazione · Aperta il 9/7/2026
FSDP token-based `forward_backward` returns `loss_fn_outputs` in packed order when max_tokens_per_microbatch > 0 Aperta

NovaSky-AI/SkyRL#1865 · 1 commento · 1 reazione · 1 assegnatario · Aperta il 5/7/2026
skyrl-v0-8b experiments Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 35/100

NovaSky-AI/SkyRL#1864 · Aperta il 5/7/2026
Multimodal Tinker sampling with LoRA 404s: _render_for_sample posts the adapter name to /v1/chat/completions/render Aperta

Difficoltà 2/5 1-3 ore Idoneità per principianti 74/100

NovaSky-AI/SkyRL#1860 · 1 commento · Aperta il 1/7/2026
HF/FSDP backend: pass `logits_to_keep` to avoid materializing full logits tensor Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 72/100

NovaSky-AI/SkyRL#1858 · 1 commento · Aperta il 1/7/2026
SkyRL Q3 2026 Roadmap Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 20/100

NovaSky-AI/SkyRL#1846 · 8 commenti · 7 reazioni · Aperta il 29/6/2026
[algorithm] Add adaptive entropy methods (ADAPO, REPO-R, MAI-Thinking) Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

NovaSky-AI/SkyRL#1845 · Aperta il 29/6/2026
[tinker] cascading distributed barrier timeouts with multi-tenant LoRA Aperta

NovaSky-AI/SkyRL#1827 · 1 assegnatario · Aperta il 23/6/2026
Fix reduction for entropy and other metrics in policy workers Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 55/100

NovaSky-AI/SkyRL#1822 · 1 commento · Aperta il 22/6/2026
adv_estimator (function param) vs advantage_estimator (config field) naming mismatch causes confusing startup crash Aperta

Difficoltà 2/5 1-3 ore Idoneità per principianti 76/100

NovaSky-AI/SkyRL#1792 · Aperta il 16/6/2026
[LoRA] Investigate LoRA training inference mismatch for Qwen3.6 MoE and GLM-4.7-Flash Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

NovaSky-AI/SkyRL#1776 · 2 commenti · 2 reazioni · Aperta il 10/6/2026
[fsdp] monitor FSDP training stability regression after #1679 Aperta

NovaSky-AI/SkyRL#1767 · 2 commenti · 1 assegnatario · Aperta il 9/6/2026
Example for training on SWE (agentic software-engineering) tasks? Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 38/100

NovaSky-AI/SkyRL#1757 · 1 commento · Aperta il 7/6/2026
[feature] Add ECHO patch to SkyRL Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

NovaSky-AI/SkyRL#1715 · 1 commento · Aperta il 28/5/2026
[CI] Add GLM 4.7 to Megatron Models CI Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 72/100

NovaSky-AI/SkyRL#1681 · Aperta il 17/5/2026
`create_ray_wrapped_inference_engines` drops the engine-core child's root cause on init failure Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 55/100

NovaSky-AI/SkyRL#1673 · Aperta il 15/5/2026
`RemoteInferenceEngine` swallows vLLM's 404, surfaces as opaque `IndexError` Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 68/100

NovaSky-AI/SkyRL#1672 · 1 commento · Aperta il 15/5/2026
[tinker] SkyRLTrainBackend tinker multi-tenancy improvements Aperta

NovaSky-AI/SkyRL#1654 · 1 assegnatario · Aperta il 12/5/2026
[tinker] Support additional Tinker LoraConfig parameters Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 65/100

NovaSky-AI/SkyRL#1632 · Aperta il 7/5/2026
[vllm] Investigate whether NCCL_CUMEM_ENABLE should be set to 0 Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

NovaSky-AI/SkyRL#1630 · Aperta il 7/5/2026
`SkyRLGymGenerator` crashes whole training step when one rollout fails Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 55/100

NovaSky-AI/SkyRL#1613 · 1 reazione · Aperta il 2/5/2026
`RayPPOTrainer._remove_tail_data` silently truncates a training batch to empty and throws `ValueError` Aperta

Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100

NovaSky-AI/SkyRL#1609 · Aperta il 1/5/2026
Flaky test_qwen3_moe_layer_lora, replace np.allclose? Aperta

Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100

NovaSky-AI/SkyRL#1604 · Aperta il 30/4/2026
SkyRL silently binds every FSDP policy worker to GPU 0 when Ray doesn't isolate `CUDA_VISIBLE_DEVICES` Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

NovaSky-AI/SkyRL#1577 · 3 commenti · Aperta il 27/4/2026
[tx] Kimi K2.5 and Kimi K2.6 support Aperta

NovaSky-AI/SkyRL#1566 · 1 commento · 3 reazioni · 1 assegnatario · Aperta il 23/4/2026
Gemma 4 training fails as `flash-attn` rejects `head_dim=512` on global attention layers Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 45/100

NovaSky-AI/SkyRL#1564 · 1 commento · Aperta il 23/4/2026
`policy.language_model_only=True` fails to exclude vision/audio towers from the FSDP policy for `google/gemma-4-E4B-it`, crashing FSDP2 init Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 50/100

NovaSky-AI/SkyRL#1559 · Aperta il 22/4/2026
Ensure sample_packing support for Qwen3.5 for FSDP2 and Megatron Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

NovaSky-AI/SkyRL#1525 · 3 commenti · Aperta il 16/4/2026

Vengono mostrati i 100 più recenti

Questa pagina elenca solo ciò che è stato indicizzato di recente. Il filtro avanzato contiene l'inventario completo, ristretto per linguaggio, difficoltà e durata.

Apri il filtro avanzato

NovaSky-AI

Vengono mostrati i 100 più recenti

Ricevi le nuove issue nella tua casella