Proprietario

OpenPipe

2 repository indicizzati · Vedi su GitHub

ART
Agent Reinforcement Trainer: train multi-step agents for real-world tasks using GRPO. Give your agents on-the-job training. Reinforcement...

Python · 10758 stelle
art-notebooks
Notebooks to demonstrate ART (Agent Reinforcement Trainer) in practice!

Shell · 11 stelle

Adatte ai principianti Tutto

Aperta Tutte

TrainerRank CP2/EP1 normal admission reaches CUDA OOM in compiled MoE LoRA forward Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

OpenPipe/ART#949 · 3 commenti · Aperta il 24/9/2026
TrainerRank oversized admission reaches CUDA OOM during Qwen3.6-35B-A3B forward Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 10/100

OpenPipe/ART#948 · Aperta il 24/9/2026
Optional EvalPort adapter for Trajectory/TrajectoryGroup (portable eval-result interchange) Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 42/100

OpenPipe/ART#935 · Aperta il 22/9/2026
Tokenization throughput: process pool capped at 4 workers, GIL-bound thread path (benchmark: caladan 059 batches) Aperta

enhancement

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

OpenPipe/ART#926 · Aperta il 19/9/2026
Support combined expert and data parallelism in TrainerRank Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

OpenPipe/ART#917 · Aperta il 16/9/2026
Support pipeline parallelism in TrainerRank without exposing stage scheduling to callers Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

OpenPipe/ART#916 · Aperta il 16/9/2026
Investigate output and gradient variability between matched same-source Qwen TrainerRank actors Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

OpenPipe/ART#902 · Aperta il 15/9/2026
Investigate large hidden-state differences when independent requests are co-packed (Qwen3.6, no-grad) Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 20/100

OpenPipe/ART#901 · Aperta il 15/9/2026
Retained sampled suffix can carry logprobs under a different causal prefix Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

OpenPipe/ART#883 · 2 commenti · Aperta il 10/9/2026
TrainerRank reusable-cache admission can leave insufficient physical CUDA memory for backward library allocations Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 30/100

OpenPipe/ART#870 · 8 commenti · Aperta il 9/9/2026
Determine whether a large dynamics RL batch refusal is necessary or avoidable by execution layout Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

OpenPipe/ART#869 · 3 commenti · Aperta il 9/9/2026
Qwen3.5-35B-A3B at EP1 with CP>1 segfaults in Transformer Engine's grouped GEMM on real-data routing (likely empty local experts) Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

OpenPipe/ART#851 · Aperta il 4/9/2026
TrainerRank MoE memory admission: backward-recompute OOM and profile calibration failures Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 20/100

OpenPipe/ART#848 · 28 commenti · Aperta il 4/9/2026
Dedicated LocalBackend vLLM server can become unreachable during LoRA adapter reload Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 50/100

OpenPipe/ART#678 · 1 commento · Aperta il 12/5/2026
Regression: forked GRPO run can produce malformed checkpoint outputs on newer ART ref Aperta

bug

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

OpenPipe/ART#672 · Aperta il 8/5/2026
LoRA adapters are not properly syncing when using LocalBackend - stale adapters are being used in rollouts Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 62/100

OpenPipe/ART#661 · Aperta il 24/4/2026
LocalBackend fork_checkpoint doesn't update vLLM's initial LoRA Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 55/100

OpenPipe/ART#651 · Aperta il 13/4/2026
Add from_entity parameter to _experimental_fork_checkpoint Aperta

Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100

OpenPipe/ART#649 · Aperta il 10/4/2026
auto_rl example uses Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 56/100

OpenPipe/ART#641 · Aperta il 3/4/2026
ServerlessBackend creates a new W&B run per training step, causing "Run finished" alerts to fire on every step Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

OpenPipe/ART#638 · Aperta il 2/4/2026
[Security] Hardcoded API Key in vLLM Server Configuration Allows Authentication Bypass Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 52/100

OpenPipe/ART#628 · Aperta il 23/3/2026
Running out of memory with version v0.5.17 Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

OpenPipe/ART#617 · Aperta il 16/3/2026
Training only processes one trajectory at a time? Aperta

question

Difficoltà 3/5 1-2 giorni Idoneità per principianti 42/100

OpenPipe/ART#533 · 1 reazione · Aperta il 25/1/2026
RFC: Deprecate allow_training_without_logprobs option Aperta

discussion

Difficoltà 5/5 Più di una settimana Idoneità per principianti 30/100

OpenPipe/ART#528 · Aperta il 21/1/2026
W&B offline Aperta

question

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

OpenPipe/ART#493 · 1 commento · Aperta il 19/12/2025
Unsloth + vLLM multi-GPU setup in ART crashes when restricting CUDA_VISIBLE_DEVICES or using tensor parallelism >1 on H100 GPUs Aperta

bug

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

OpenPipe/ART#478 · Aperta il 11/12/2025
RULER produces scores >1, arbitrary outputs (7, 10, 15…), nondeterministic behavior, and malformed JSON when judge model is Qwen3-32B running on Ollama Aperta

bug

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

OpenPipe/ART#477 · Aperta il 11/12/2025
RULER + Litellm with Ollama: `ollama_chat` recommended, but `/api/chat` cannot generate required JSON schema Aperta

bug

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

OpenPipe/ART#476 · Aperta il 11/12/2025
RULER scoring + training tightly coupled to Litellm/OpenAI, cannot cleanly use ChatOllama/ChatNVIDIA as judge/inference models Aperta

bug

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

OpenPipe/ART#475 · Aperta il 11/12/2025
Context window incorrectly capped at 8192 tokens when using Ollama (token count exceeded 8192) Aperta

bug

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

OpenPipe/ART#473 · Aperta il 11/12/2025
Training hangs at 0/12 with Qwen2.5-14B + Unsloth/vLLM (KV cache reported as 0.0 GB despite free VRAM) Aperta

bug

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

OpenPipe/ART#472 · Aperta il 11/12/2025
Is it not possible to set the rollout engine to multiple gpus? Aperta

question

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

OpenPipe/ART#470 · Aperta il 10/12/2025
Training hangs after a few steps Aperta

bug

Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

OpenPipe/ART#469 · 3 commenti · 3 reazioni · Aperta il 8/12/2025
wandb logs for ART•E LangGraph Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 25/100

OpenPipe/art-notebooks#12 · Aperta il 28/11/2025
Training gets stuck after completing just one trajectory Aperta

bug

Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

OpenPipe/ART#459 · 1 commento · 1 reazione · Aperta il 18/11/2025
Cuda out of Memory Aperta

question

Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

OpenPipe/ART#452 · 1 commento · Aperta il 9/11/2025
Torchtune development has been discontinued. Have you considered switching to a different multi-GPU train backend? Aperta

question

Difficoltà 5/5 Più di una settimana Idoneità per principianti 20/100

OpenPipe/ART#450 · 2 commenti · Aperta il 5/11/2025
[Bug] Unable to create Qwen3 MoE model Aperta

bug

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

OpenPipe/ART#444 · 4 commenti · 1 reazione · Aperta il 23/10/2025
Cuda error in RULER notebook Aperta

bug

Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

OpenPipe/ART#436 · 1 commento · 1 reazione · Aperta il 14/10/2025
Minio Support Aperta

enhancement

Difficoltà 3/5 1-2 giorni Idoneità per principianti 45/100

OpenPipe/ART#435 · Aperta il 9/10/2025
Why Do Results from MCP-Trained Models Differ Greatly Between generate_benchmarks.py and train.py Aperta

question

Difficoltà 4/5 3-5 giorni Idoneità per principianti 32/100

OpenPipe/ART#417 · Aperta il 22/9/2025
uv venv error initializing art backend on skypilot/aws Aperta

bug

Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

OpenPipe/ART#416 · 4 commenti · Aperta il 18/9/2025
AttributeError: 'LLM' object has no attribute 'engine_step' with Unsloth and vLLM Aperta

bug

Difficoltà 3/5 1-2 giorni Idoneità per principianti 35/100

OpenPipe/ART#411 · 1 commento · Aperta il 17/9/2025
[Feature Request] Azure OpenAI Support Aperta

enhancement

Difficoltà 3/5 1-2 giorni Idoneità per principianti 45/100

OpenPipe/ART#409 · 1 commento · Aperta il 17/9/2025
RuntimeError: torch.cuda.MemPool doesn't currently support expandable_segments during vLLM model initialization Aperta

bug

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

OpenPipe/ART#405 · 3 commenti · 1 reazione · Aperta il 16/9/2025
Always Block when train Aperta

bug

Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

OpenPipe/ART#401 · 3 commenti · Aperta il 12/9/2025
[Feature Request] Add integration to smolagents Aperta

enhancement

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

OpenPipe/ART#398 · 2 commenti · Aperta il 9/9/2025
About appropriate groups_per_step parameter setting given training and validation dataset volume Aperta

question

Difficoltà 5/5 Più di una settimana Idoneità per principianti 20/100

OpenPipe/ART#397 · Aperta il 9/9/2025
Allow running multiple `art.LocalBackend` sessions on different processes Aperta

enhancement

Difficoltà 4/5 3-5 giorni Idoneità per principianti 42/100

OpenPipe/ART#396 · Aperta il 8/9/2025
[Question] About 2048 scoring Aperta

question

Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

OpenPipe/ART#394 · 3 commenti · Aperta il 7/9/2025

OpenPipe

Ricevi le nuove issue nella tua casella