Separate real-time and batch priority requests to analyze packages
メンテナーはふだん 6 日以内に返信
まだ誰も着手していません。
評価
- 難易度
- 5/5
- 見積もり時間
- 1週間以上
- 初心者へのやさしさ
- 30/100
- issue の種類
- 機能追加
- 明瞭さ
- 説明が足りない
- 活発さ
- 停滞
- 技術スタック
- go
調査の方向性
この issue では共有の PubSub キューと分析ワーカーが挙げられていますが、ファイルやテストは示されていません。まずキューの消費処理とワーカーのエントリポイントを見つけ、次にバッチメッセージとリアルタイムメッセージがどのように識別されているかを確認してください。優先順位付けまたは別々のワーカーによって、バッチ分析がリアルタイム処理をブロックしなくなれば完了です。
索引モデルが issue の本文から書いたものです。
説明
I started a backfill of 95k packages from crates.io.
These enter as messages in the same PubSub queue as the live "real-time" messages for packages being updated.
Unfortunately this causes the "real-time" requests to be delayed, potentially missing detections for packages that are only live for a short time on a package repository.
Ideally there should be a way to priotize "batch" messages from "real-time" messages, so the real-time messages can be processed first (or at a higher rate).
Alternatively separate "batch" analysis workers could be spun-up when batch work is present.
Either way it would be good if batch work didn't block real-time work.
- 主要言語
- Go
- スター
- 925
- フォーク
- 75
- 平均マージ
- 4日 2時間
- マージ済み PR（30日）
- 3
環境構築
- Dockerfile・Docker Compose ファイルなし
- プルリクエストのテンプレートなし
- コントリビューションガイドを読む
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
ossf/package-analysis のほかの issue
-
Python execute phase aborts with error_analysis when the package closes stdout (MCP stdio servers)オープン
難易度 3/5 1〜2日 初心者へのやさしさ 78/100
ossf/package-analysis#1200 ·
メンテナーはふだん 6 日以内に返信
-
難易度 4/5 3〜5日 初心者へのやさしさ 45/100
ossf/package-analysis#1192 ·
メンテナーはふだん 6 日以内に返信
-
難易度 4/5 3〜5日 初心者へのやさしさ 35/100
ossf/package-analysis#1125 ·
メンテナーはふだん 6 日以内に返信
-
4gbオープン
難易度 5/5 1週間以上 初心者へのやさしさ 5/100
ossf/package-analysis#1123 ·
メンテナーはふだん 6 日以内に返信
-
>4 gbオープン
難易度 5/5 1週間以上 初心者へのやさしさ 10/100
ossf/package-analysis#1122 ·
メンテナーはふだん 6 日以内に返信
ossf/package-analysis の issue をすべて見る
似ている issue
-
難易度 2/5 1〜3時間 初心者へのやさしさ 62/100
-
evener-transcript-v2-upgrade tool still scans transcript files through bufio's 4 KiB default bufferオープン
難易度 1/5 1時間未満 初心者へのやさしさ 78/100
prime-radiant-inc/evener#6370 ·
メンテナーはふだん 1 日以内に返信
-
ManageSieve proxy: a backend's NO/BYE greeting is skipped as a capability line and reported as EOFオープンbug
難易度 2/5 1〜3時間 初心者へのやさしさ 72/100
メンテナーはふだん 1 日以内に返信
-
Mend: dependency security vulnerability
難易度 2/5 1〜3時間 初心者へのやさしさ 65/100
-
Mend: dependency security vulnerability
難易度 2/5 1〜3時間 初心者へのやさしさ 62/100
ManageIQ/manageiq-pods#1476 ·
メンテナーはふだん 1 日以内に返信