OpenPipe/ART

Ver en GitHub

Agent Reinforcement Trainer: train multi-step agents for real-world tasks using GRPO. Give your agents on-the-job training. Reinforcement learning for Qwen3.6, GPT-OSS, Llama, and more!

Estrellas: 10.8k
Forks: 989
Issues abiertos para principiantes: 1
Issues indexados: 72
Merge medio: 6 h 29 min
PR fusionados (30 d): 85

Lenguaje dominante: Python
Licencia: Apache-2.0
Último push a GitHub: 19/9/2026
Última indexación: 20/9/2026
Guía de contribución: Guía de contribución
Código de conducta: Sin código de conducta
Etiquetas para principiantes: Sin etiquetas para principiantes indexadas

Para principiantes Todo

Abierto Todos

Tokenization throughput: process pool capped at 4 workers, GIL-bound thread path (benchmark: caladan 059 batches) Abierto

enhancement

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

OpenPipe/ART#926 · Abierto el 19/9/2026
Support combined expert and data parallelism in TrainerRank Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

OpenPipe/ART#917 · Abierto el 16/9/2026
Support pipeline parallelism in TrainerRank without exposing stage scheduling to callers Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

OpenPipe/ART#916 · Abierto el 16/9/2026
Investigate output and gradient variability between matched same-source Qwen TrainerRank actors Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

OpenPipe/ART#902 · Abierto el 15/9/2026
Investigate large hidden-state differences when independent requests are co-packed (Qwen3.6, no-grad) Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 20/100

OpenPipe/ART#901 · Abierto el 15/9/2026
Retained sampled suffix can carry logprobs under a different causal prefix Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

OpenPipe/ART#883 · 2 comentarios · Abierto el 10/9/2026
TrainerRank reusable-cache admission can leave insufficient physical CUDA memory for backward library allocations Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 30/100

OpenPipe/ART#870 · 8 comentarios · Abierto el 9/9/2026
Determine whether a large dynamics RL batch refusal is necessary or avoidable by execution layout Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

OpenPipe/ART#869 · 3 comentarios · Abierto el 9/9/2026
Qwen3.5-35B-A3B at EP1 with CP>1 segfaults in Transformer Engine's grouped GEMM on real-data routing (likely empty local experts) Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

OpenPipe/ART#851 · Abierto el 4/9/2026
TrainerRank MoE memory admission: backward-recompute OOM and profile calibration failures Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 20/100

OpenPipe/ART#848 · 28 comentarios · Abierto el 4/9/2026
Dedicated LocalBackend vLLM server can become unreachable during LoRA adapter reload Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 50/100

OpenPipe/ART#678 · 1 comentario · Abierto el 12/5/2026
Regression: forked GRPO run can produce malformed checkpoint outputs on newer ART ref Abierto

bug

Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

OpenPipe/ART#672 · Abierto el 8/5/2026
LoRA adapters are not properly syncing when using LocalBackend - stale adapters are being used in rollouts Abierto

Dificultad 3/5 1-2 días Aptitud para principiantes 62/100

OpenPipe/ART#661 · Abierto el 24/4/2026
LocalBackend fork_checkpoint doesn't update vLLM's initial LoRA Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 55/100

OpenPipe/ART#651 · Abierto el 13/4/2026
Add from_entity parameter to _experimental_fork_checkpoint Abierto

Dificultad 2/5 1-3 horas Aptitud para principiantes 72/100

OpenPipe/ART#649 · Abierto el 10/4/2026
auto_rl example uses Abierto

Dificultad 3/5 1-2 días Aptitud para principiantes 56/100

OpenPipe/ART#641 · Abierto el 3/4/2026
ServerlessBackend creates a new W&B run per training step, causing "Run finished" alerts to fire on every step Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

OpenPipe/ART#638 · Abierto el 2/4/2026
[Security] Hardcoded API Key in vLLM Server Configuration Allows Authentication Bypass Abierto

Dificultad 3/5 1-2 días Aptitud para principiantes 52/100

OpenPipe/ART#628 · Abierto el 23/3/2026
Running out of memory with version v0.5.17 Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 25/100

OpenPipe/ART#617 · Abierto el 16/3/2026
Training only processes one trajectory at a time? Abierto

question

Dificultad 3/5 1-2 días Aptitud para principiantes 42/100

OpenPipe/ART#533 · 1 reacción · Abierto el 25/1/2026
RFC: Deprecate allow_training_without_logprobs option Abierto

discussion

Dificultad 5/5 Más de una semana Aptitud para principiantes 30/100

OpenPipe/ART#528 · Abierto el 21/1/2026
W&B offline Abierto

question

Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

OpenPipe/ART#493 · 1 comentario · Abierto el 19/12/2025
Unsloth + vLLM multi-GPU setup in ART crashes when restricting CUDA_VISIBLE_DEVICES or using tensor parallelism >1 on H100 GPUs Abierto

bug

Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

OpenPipe/ART#478 · Abierto el 11/12/2025
RULER produces scores >1, arbitrary outputs (7, 10, 15…), nondeterministic behavior, and malformed JSON when judge model is Qwen3-32B running on Ollama Abierto

bug

Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

OpenPipe/ART#477 · Abierto el 11/12/2025
RULER + Litellm with Ollama: `ollama_chat` recommended, but `/api/chat` cannot generate required JSON schema Abierto

bug

Dificultad 4/5 3-5 días Aptitud para principiantes 35/100

OpenPipe/ART#476 · Abierto el 11/12/2025
RULER scoring + training tightly coupled to Litellm/OpenAI, cannot cleanly use ChatOllama/ChatNVIDIA as judge/inference models Abierto

bug

Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

OpenPipe/ART#475 · Abierto el 11/12/2025
Context window incorrectly capped at 8192 tokens when using Ollama (token count exceeded 8192) Abierto

bug

Dificultad 4/5 3-5 días Aptitud para principiantes 35/100

OpenPipe/ART#473 · Abierto el 11/12/2025
Training hangs at 0/12 with Qwen2.5-14B + Unsloth/vLLM (KV cache reported as 0.0 GB despite free VRAM) Abierto

bug

Dificultad 4/5 3-5 días Aptitud para principiantes 35/100

OpenPipe/ART#472 · Abierto el 11/12/2025
Is it not possible to set the rollout engine to multiple gpus? Abierto

question

Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

OpenPipe/ART#470 · Abierto el 10/12/2025
Training hangs after a few steps Abierto

bug

Dificultad 4/5 3-5 días Aptitud para principiantes 25/100

OpenPipe/ART#469 · 3 comentarios · 3 reacciones · Abierto el 8/12/2025
Training gets stuck after completing just one trajectory Abierto

bug

Dificultad 4/5 3-5 días Aptitud para principiantes 25/100

OpenPipe/ART#459 · 1 comentario · 1 reacción · Abierto el 18/11/2025
Cuda out of Memory Abierto

question

Dificultad 4/5 3-5 días Aptitud para principiantes 25/100

OpenPipe/ART#452 · 1 comentario · Abierto el 9/11/2025
Torchtune development has been discontinued. Have you considered switching to a different multi-GPU train backend? Abierto

question

Dificultad 5/5 Más de una semana Aptitud para principiantes 20/100

OpenPipe/ART#450 · 2 comentarios · Abierto el 5/11/2025
[Bug] Unable to create Qwen3 MoE model Abierto

bug

Dificultad 4/5 3-5 días Aptitud para principiantes 35/100

OpenPipe/ART#444 · 4 comentarios · 1 reacción · Abierto el 23/10/2025
Cuda error in RULER notebook Abierto

bug

Dificultad 4/5 3-5 días Aptitud para principiantes 25/100

OpenPipe/ART#436 · 1 comentario · 1 reacción · Abierto el 14/10/2025
Minio Support Abierto

enhancement

Dificultad 3/5 1-2 días Aptitud para principiantes 45/100

OpenPipe/ART#435 · Abierto el 9/10/2025
Why Do Results from MCP-Trained Models Differ Greatly Between generate_benchmarks.py and train.py Abierto

question

Dificultad 4/5 3-5 días Aptitud para principiantes 32/100

OpenPipe/ART#417 · Abierto el 22/9/2025
uv venv error initializing art backend on skypilot/aws Abierto

bug

Dificultad 4/5 3-5 días Aptitud para principiantes 25/100

OpenPipe/ART#416 · 4 comentarios · Abierto el 18/9/2025
AttributeError: 'LLM' object has no attribute 'engine_step' with Unsloth and vLLM Abierto

bug

Dificultad 3/5 1-2 días Aptitud para principiantes 35/100

OpenPipe/ART#411 · 1 comentario · Abierto el 17/9/2025
[Feature Request] Azure OpenAI Support Abierto

enhancement

Dificultad 3/5 1-2 días Aptitud para principiantes 45/100

OpenPipe/ART#409 · 1 comentario · Abierto el 17/9/2025
RuntimeError: torch.cuda.MemPool doesn't currently support expandable_segments during vLLM model initialization Abierto

bug

Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

OpenPipe/ART#405 · 3 comentarios · 1 reacción · Abierto el 16/9/2025
Always Block when train Abierto

bug

Dificultad 4/5 3-5 días Aptitud para principiantes 25/100

OpenPipe/ART#401 · 3 comentarios · Abierto el 12/9/2025
[Feature Request] Add integration to smolagents Abierto

enhancement

Dificultad 4/5 3-5 días Aptitud para principiantes 35/100

OpenPipe/ART#398 · 2 comentarios · Abierto el 9/9/2025
About appropriate groups_per_step parameter setting given training and validation dataset volume Abierto

question

Dificultad 5/5 Más de una semana Aptitud para principiantes 20/100

OpenPipe/ART#397 · Abierto el 9/9/2025
Allow running multiple `art.LocalBackend` sessions on different processes Abierto

enhancement

Dificultad 4/5 3-5 días Aptitud para principiantes 42/100

OpenPipe/ART#396 · Abierto el 8/9/2025
[Question] About 2048 scoring Abierto

question

Dificultad 4/5 3-5 días Aptitud para principiantes 25/100

OpenPipe/ART#394 · 3 comentarios · Abierto el 7/9/2025
Training crashes after sometime Abierto

bug

Dificultad 4/5 3-5 días Aptitud para principiantes 25/100

OpenPipe/ART#386 · 1 comentario · Abierto el 30/8/2025
Feature: Dr. GRPO Support Abierto

enhancement

Dificultad 4/5 3-5 días Aptitud para principiantes 35/100

OpenPipe/ART#364 · 1 comentario · 3 reacciones · Abierto el 25/8/2025
Support `exclude` parameter for SkyPilotBackend `_experimental_pull_from_s3` Abierto

enhancement

Dificultad 2/5 1-3 horas Aptitud para principiantes 52/100

OpenPipe/ART#350 · Abierto el 20/8/2025
Add support for SFT through ART directly Abierto

enhancement

Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

OpenPipe/ART#348 · 1 comentario · 3 reacciones · Abierto el 19/8/2025

OpenPipe/ART

Recibe los nuevos issues en tu correo