Proprietário

NovaSky-AI

1 repositório indexado · Ver no GitHub

SkyRL
SkyRL: A Modular Full-stack RL Library for LLMs

Python · 2339 estrelas

Para iniciantes Tudo

Abertas Todas

[tinker] Support newer Tinker SDKs: sampling fails with SDK 0.30.1 Aberta

Dificuldade 3/5 1-2 dias Facilidade para iniciantes 65/100

NovaSky-AI/SkyRL#2287 · Aberta em 24/9/2026
Support trainer-only and inference-only Tinker runtimes Aberta

Dificuldade 3/5 1-2 dias Facilidade para iniciantes 55/100

NovaSky-AI/SkyRL#2278 · Aberta em 23/9/2026
Support compatible alternate base weights for Tinker runtimes Aberta

Dificuldade 3/5 1-2 dias Facilidade para iniciantes 65/100

NovaSky-AI/SkyRL#2279 · Aberta em 23/9/2026
pad_training_input_batch pads TensorList fields with tensor[0].clone() — loss-masked pad rows carry a real row's payload (ragged-consumer crash; wrong pixel_values/image_grid_thw on pad rows) Aberta

Dificuldade 2/5 1-3 horas Facilidade para iniciantes 82/100

NovaSky-AI/SkyRL#2263 · Aberta em 22/9/2026
fully_async (non-colocated): training actor emits all-NaN logits on every microbatch of the first step after the first NCCL weight sync; weights/optimizer/exports all finite Aberta

Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 38/100

NovaSky-AI/SkyRL#2247 · Aberta em 19/9/2026
fully_async: non-colocated weight sync ignores clear_kv_cache_on_weight_sync — stale prefix-cache KV trained on after each sync Aberta

Dificuldade 4/5 3-5 dias Facilidade para iniciantes 68/100

NovaSky-AI/SkyRL#2246 · Aberta em 19/9/2026
[bug][fsdp] FSDP2 manual offload/load corrupts DTensor unshard state under `colocate_all=True`, causing silent non-deterministic logit errors Aberta

NovaSky-AI/SkyRL#2215 · 1 comentário · 1 responsável · Aberta em 16/9/2026
[feature] Honor max_tokens_per_microbatch in the loss-path forward (forward with loss_fn) Aberta

Dificuldade 4/5 3-5 dias Facilidade para iniciantes 68/100

NovaSky-AI/SkyRL#2211 · Aberta em 15/9/2026
[weight sync] Improve offload/backload semantics while training with LoRA with `colocate_all=True` Aberta

NovaSky-AI/SkyRL#2206 · 1 responsável · Aberta em 14/9/2026
Support full-distribution comparison to validate bitwise consistency between rollout and training Aberta

Dificuldade 4/5 3-5 dias Facilidade para iniciantes 52/100

NovaSky-AI/SkyRL#2201 · 1 comentário · Aberta em 12/9/2026
[tinker] Retain only the K most recent checkpoints Aberta

Dificuldade 4/5 3-5 dias Facilidade para iniciantes 45/100

NovaSky-AI/SkyRL#2116 · Aberta em 1/9/2026
[train] FSDP2 cannot train glm4v VLMs: per-nn.Embedding fully_shard leaves vision position_embedding sharded at raw .weight read (grid_sample DTensor crash) Aberta

Dificuldade 3/5 1-2 dias Facilidade para iniciantes 55/100

NovaSky-AI/SkyRL#2087 · Aberta em 22/8/2026
Multi-turn VLM generator corrupts trajectories for all thinking models: history-editing chat templates break the deferred obs-token offsets Aberta

Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 25/100

NovaSky-AI/SkyRL#2075 · Aberta em 21/8/2026
[deps] Migrate custom vLLM-router fork on top of 0.1.15 release of vllm-router Aberta

NovaSky-AI/SkyRL#2070 · 1 comentário · 1 responsável · Aberta em 19/8/2026
[vllm] Remove old inference worker wrap code after 0.26.0 update Aberta

NovaSky-AI/SkyRL#2020 · 2 responsáveis · Aberta em 12/8/2026
[examples] Add example startup scripts for tinker engine Aberta

Dificuldade 4/5 3-5 dias Facilidade para iniciantes 63/100

NovaSky-AI/SkyRL#1983 · 1 comentário · Aberta em 4/8/2026
Qwen3.6-27B MTP is unsafe with prefix caching enabled Aberta

Dificuldade 4/5 3-5 dias Facilidade para iniciantes 50/100

NovaSky-AI/SkyRL#1981 · Aberta em 4/8/2026
[dependencies] migrate to uv official wheels Aberta

Dificuldade 2/5 1-3 horas Facilidade para iniciantes 72/100

NovaSky-AI/SkyRL#1975 · 1 comentário · Aberta em 3/8/2026
[RFC] SkyRL TITO Proxy Aberta

Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 25/100

NovaSky-AI/SkyRL#1959 · 4 comentários · Aberta em 29/7/2026
[usability] Improve SkyRL cold start time Aberta

Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 35/100

NovaSky-AI/SkyRL#1954 · 1 comentário · Aberta em 28/7/2026
[frontend] Support tinker as a backend for SkyRL's frontend training code Aberta

Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 35/100

NovaSky-AI/SkyRL#1949 · 1 comentário · 2 reações · Aberta em 27/7/2026
SkyRL quantization (FP8, MXFP8, NVFP4) tracker Aberta

Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 25/100

NovaSky-AI/SkyRL#1943 · Aberta em 24/7/2026
[RFC] Delta weight sync in SkyRL Aberta

NovaSky-AI/SkyRL#1903 · 1 responsável · Aberta em 15/7/2026
skyrl-v0-8b-agent Aberta

Dificuldade 4/5 3-5 dias Facilidade para iniciantes 35/100

NovaSky-AI/SkyRL#1885 · Aberta em 13/7/2026
[CI] Some CPU-only megatron tests are skipped in CPU CI Aberta

NovaSky-AI/SkyRL#1881 · 1 responsável · Aberta em 10/7/2026
[tinker] Colocated sampling runs in run-to-completion batches — multi-turn RL sees ~8x sampling latency Aberta

Dificuldade 4/5 3-5 dias Facilidade para iniciantes 45/100

NovaSky-AI/SkyRL#1877 · 1 reação · Aberta em 9/7/2026
FSDP token-based `forward_backward` returns `loss_fn_outputs` in packed order when max_tokens_per_microbatch > 0 Aberta

NovaSky-AI/SkyRL#1865 · 1 comentário · 1 reação · 1 responsável · Aberta em 5/7/2026
skyrl-v0-8b experiments Aberta

Dificuldade 3/5 1-2 dias Facilidade para iniciantes 35/100

NovaSky-AI/SkyRL#1864 · Aberta em 5/7/2026
Multimodal Tinker sampling with LoRA 404s: _render_for_sample posts the adapter name to /v1/chat/completions/render Aberta

Dificuldade 2/5 1-3 horas Facilidade para iniciantes 74/100

NovaSky-AI/SkyRL#1860 · 1 comentário · Aberta em 1/7/2026
HF/FSDP backend: pass `logits_to_keep` to avoid materializing full logits tensor Aberta

Dificuldade 3/5 1-2 dias Facilidade para iniciantes 72/100

NovaSky-AI/SkyRL#1858 · 1 comentário · Aberta em 1/7/2026
SkyRL Q3 2026 Roadmap Aberta

Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 20/100

NovaSky-AI/SkyRL#1846 · 8 comentários · 7 reações · Aberta em 29/6/2026
[algorithm] Add adaptive entropy methods (ADAPO, REPO-R, MAI-Thinking) Aberta

Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 25/100

NovaSky-AI/SkyRL#1845 · Aberta em 29/6/2026
[tinker] cascading distributed barrier timeouts with multi-tenant LoRA Aberta

NovaSky-AI/SkyRL#1827 · 1 responsável · Aberta em 23/6/2026
Fix reduction for entropy and other metrics in policy workers Aberta

Dificuldade 4/5 3-5 dias Facilidade para iniciantes 55/100

NovaSky-AI/SkyRL#1822 · 1 comentário · Aberta em 22/6/2026
adv_estimator (function param) vs advantage_estimator (config field) naming mismatch causes confusing startup crash Aberta

Dificuldade 2/5 1-3 horas Facilidade para iniciantes 76/100

NovaSky-AI/SkyRL#1792 · Aberta em 16/6/2026
[LoRA] Investigate LoRA training inference mismatch for Qwen3.6 MoE and GLM-4.7-Flash Aberta

Dificuldade 4/5 3-5 dias Facilidade para iniciantes 35/100

NovaSky-AI/SkyRL#1776 · 2 comentários · 2 reações · Aberta em 10/6/2026
[fsdp] monitor FSDP training stability regression after #1679 Aberta

NovaSky-AI/SkyRL#1767 · 2 comentários · 1 responsável · Aberta em 9/6/2026
Example for training on SWE (agentic software-engineering) tasks? Aberta

Dificuldade 4/5 3-5 dias Facilidade para iniciantes 38/100

NovaSky-AI/SkyRL#1757 · 1 comentário · Aberta em 7/6/2026
[feature] Add ECHO patch to SkyRL Aberta

Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 35/100

NovaSky-AI/SkyRL#1715 · 1 comentário · Aberta em 28/5/2026
[CI] Add GLM 4.7 to Megatron Models CI Aberta

Dificuldade 3/5 1-2 dias Facilidade para iniciantes 72/100

NovaSky-AI/SkyRL#1681 · Aberta em 17/5/2026
`create_ray_wrapped_inference_engines` drops the engine-core child's root cause on init failure Aberta

Dificuldade 4/5 3-5 dias Facilidade para iniciantes 55/100

NovaSky-AI/SkyRL#1673 · Aberta em 15/5/2026
`RemoteInferenceEngine` swallows vLLM's 404, surfaces as opaque `IndexError` Aberta

Dificuldade 3/5 1-2 dias Facilidade para iniciantes 68/100

NovaSky-AI/SkyRL#1672 · 1 comentário · Aberta em 15/5/2026
[tinker] SkyRLTrainBackend tinker multi-tenancy improvements Aberta

NovaSky-AI/SkyRL#1654 · 1 responsável · Aberta em 12/5/2026
[tinker] Support additional Tinker LoraConfig parameters Aberta

Dificuldade 3/5 1-2 dias Facilidade para iniciantes 65/100

NovaSky-AI/SkyRL#1632 · Aberta em 7/5/2026
[vllm] Investigate whether NCCL_CUMEM_ENABLE should be set to 0 Aberta

Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 35/100

NovaSky-AI/SkyRL#1630 · Aberta em 7/5/2026
`SkyRLGymGenerator` crashes whole training step when one rollout fails Aberta

Dificuldade 4/5 3-5 dias Facilidade para iniciantes 55/100

NovaSky-AI/SkyRL#1613 · 1 reação · Aberta em 2/5/2026
`RayPPOTrainer._remove_tail_data` silently truncates a training batch to empty and throws `ValueError` Aberta

Dificuldade 2/5 1-3 horas Facilidade para iniciantes 72/100

NovaSky-AI/SkyRL#1609 · Aberta em 1/5/2026
Flaky test_qwen3_moe_layer_lora, replace np.allclose? Aberta

Dificuldade 2/5 1-3 horas Facilidade para iniciantes 68/100

NovaSky-AI/SkyRL#1604 · Aberta em 30/4/2026
SkyRL silently binds every FSDP policy worker to GPU 0 when Ray doesn't isolate `CUDA_VISIBLE_DEVICES` Aberta

Dificuldade 4/5 3-5 dias Facilidade para iniciantes 48/100

NovaSky-AI/SkyRL#1577 · 3 comentários · Aberta em 27/4/2026
[tx] Kimi K2.5 and Kimi K2.6 support Aberta

NovaSky-AI/SkyRL#1566 · 1 comentário · 3 reações · 1 responsável · Aberta em 23/4/2026

Mostrando os 100 mais recentes

Esta página lista apenas o que foi indexado mais recentemente. O filtro avançado tem o inventário completo, refinado por linguagem, dificuldade e duração.

Abrir o filtro avançado

NovaSky-AI

Mostrando os 100 mais recentes

Receba novas issues na sua caixa de entrada