How to deal with failed rollouts?
メンテナーはふだん 2 日以内に返信
評価
- 難易度
- 5/5
- 見積もり時間
- 1週間以上
- 初心者へのやさしさ
- 30/100
- issue の種類
- 機能追加
- 明瞭さ
- 説明が足りない
- 活発さ
- 停滞
- 技術スタック
- python
- 領域
- ai, machine-learning
調査の方向性
まず Agent.rollout エントリポイントを読み、rollout の失敗とバッチがどのように処理されるかを追跡します。ファイルやテストは指定されていません。完了とするには、失敗した rollout とバッチに対する、設定項目とバリデーションを含む、明確に仕様化されサポートされたポリシーが必要です。
索引モデルが issue の本文から書いたものです。
説明
If a rollout fails due to system issues (such as network connection failure), should I return None in Agent.rollout? Can verl automatically skip such failed rollouts?
Additionally, if there are too many failed rollouts in a batch (e.g., due to temporary network instability), can I skip the entire batch directly? Are there any configurations for this?
- 主要言語
- Python
- スター
- 18.8k
- フォーク
- 1.7k
- 平均マージ
- 3日 13時間
- マージ済み PR（30日）
- 10
環境構築
このプロジェクトには開発コンテナ、Dockerfile、コントリビューションガイドがありません。まず README を読み、一般的な手順ははじめてのコントリビューションガイドを参照してください。
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
microsoft/agent-lightning のほかの issue
-
Low-precision rollout normalization can overflow its divisor and erase advantages対応中かも このイシューにリンクされたプルリクエストがオープン中、またはマージ済みです。 オープン
難易度 2/5 1〜3時間 初心者へのやさしさ 76/100
microsoft/agent-lightning#661 ·
メンテナーはふだん 2 日以内に返信
-
RayPPOTrainer._dump_generations() missing gts argument in _train_step call対応中かも @yunkai-yyk が 253 日前に担当しました。 オープンbug v0.x verl
難易度 1/5 1時間未満 初心者へのやさしさ 68/100
microsoft/agent-lightning#492 ·
メンテナーはふだん 2 日以内に返信
-
enhancement store v0.x
難易度 2/5 1〜3時間 初心者へのやさしさ 62/100
microsoft/agent-lightning#372 · コメント 10 件 ·
メンテナーはふだん 2 日以内に返信
-
Terminal rollout projection drops numeric dataset ID zero対応中かも @notoufa が 2 日前に担当しました。 オープン
難易度 2/5 1〜3時間 初心者へのやさしさ 45/100
microsoft/agent-lightning#659 ·
メンテナーはふだん 2 日以内に返信
-
Gateway loses model-request events for malformed or non-object upstream JSON対応中かも @JianhaoYu-AI が 3 日前に担当しました。 オープン
難易度 3/5 1〜2日 初心者へのやさしさ 20/100
microsoft/agent-lightning#655 ·
メンテナーはふだん 2 日以内に返信
microsoft/agent-lightning の issue をすべて見る
似ている issue
-
changelog investigate
難易度 2/5 1〜3時間 初心者へのやさしさ 67/100
ramnes/notion-sdk-py#433 ·
-
docs pkg:core
難易度 1/5 1時間未満 初心者へのやさしさ 84/100
pydantic/pydantic-ai#11929 ·
メンテナーはふだん 1 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 78/100
intake/intake-esm#789 ·
-
難易度 2/5 1〜3時間 初心者へのやさしさ 82/100
MemMachine/MemMachine#1877 ·
メンテナーはふだん 3 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 68/100
openedx/openedx-authz#579 ·
メンテナーはふだん 1 日以内に返信