Compaction budget regression fixture remains below budget with accurate tokenization

オープン 初心者向け
#5,418 コメント 3 件 リアクション 0 件 担当者 0 名 GitHub で見る

メンテナーはふだん 1 日以内に返信

まだ誰も着手していません。

  • #5419 @dajiaohuang による — マージされずにクローズ

評価

難易度
2/5
見積もり時間
1〜3時間
初心者へのやさしさ
62/100
issue の種類
バグ
明瞭さ
明確に書かれている
活発さ
活発
技術スタック
python
領域
testing

調査の方向性

失敗しているテストは TestCompactionMaxTokensResolution.test_unset_triggers_when_budget_approached で、入力を "A" * 4 * (resolved + 50000) として構築しています。まず正確なトークナイザーでこのテストを実行し、カウントされたサイズ(予算86016に対して68008)を確認してから、フィクスチャの定義場所を探してください。カウントされた予算を実際に超える入力に置き換え、トリガーの確認の前に予算以下と予算超過の前提をアサートしてください。正確なトークナイザーとオフラインのヒューリスティックの両方でテストが通り、コンパクションの本番コードを変更しなければ完了です。

索引モデルが issue の本文から書いたものです。

説明

The whole-unit CI currently fails TestCompactionMaxTokensResolution.test_unset_triggers_when_budget_approached even though compaction correctly sees its input below the resolved budget.

On unchanged main@bb470c786 with a locally available accurate tokenizer, the resolved budget is 86016 tokens. The test constructs "A" * 4 * (resolved + 50000), but its counted size is only 68008 tokens: repeated A characters compress under BPE, so character-count/4 does not establish the test's over-budget premise. The same failure is present in the current #5410 unit run (10240 passed, 1 failed): https://github.com/MervinPraison/PraisonAI/actions/runs/36841174039/job/110300377492

Use a fixture that actually crosses the counted token budget, and assert the below/above-budget premises before testing the trigger. This should preserve coverage for both the accurate tokenizer and the offline heuristic without changing production compaction behavior or excluding tests.

主要言語
Python
スター
9.3k
フォーク
1.5k
平均マージ
1日 5時間
マージ済み PR(30日)
520

環境構築

このプロジェクトには開発コンテナ、Dockerfile、コントリビューションガイドがありません。まず README を読み、一般的な手順ははじめてのコントリビューションガイドを参照してください。

はじめの一歩

  1. issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
  2. 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
  3. リポジトリをフォークし、ブランチを切って変更します。
  4. issue 番号を参照したプルリクエストを送ります。

MervinPraison/PraisonAI のほかの issue

MervinPraison/PraisonAI の issue をすべて見る

似ている issue

Python の issue をもっと見る

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。