Very slow scheduling
まだ誰も着手していません。
評価
- 難易度
- 4/5
- 見積もり時間
- 3〜5日
- 初心者へのやさしさ
- 25/100
- issue の種類
- バグ
- 明瞭さ
- 説明が足りない
- 活発さ
- 停滞
- 技術スタック
- r
調査の方向性
まず、scheduling オプションと verbose または trace フラグのドキュメントを確認します。Slurm 上で小さなジョブを使って報告内容を再現し、scheduling の値と起動遅延を比較します。scheduling が遅い原因を切り分け、適切な動作またはドキュメントを明確にできれば完了です。
索引モデルが issue の本文から書いたものです。
説明
I am sorry to not have a reproducible example yet. My code base is very large and was running just fine until the job size became small. So I'll make a reproducible example after hearing some suggestions on what to test. In my case, the jobs are rather small - 10s each. The problem I'm seeing is they don't get scheduled very quickly. In fact, at any given time only one slurm job, or at most two, are running (the machine they are running on can run ~15 jobs by ram and cpu requirements). I'm trying to run 60 chunks, and to resolve this problem I set scheduling to 5, which did bump up the number of running jobs to 2-3. However, the main problem is that the chunks seem to take 10-15 seconds to launch, and I don't know what I changed - a few days ago, with larger jobs - this was not the case. So to my specific questions, before I try to generate a small reproducible example:
- Is there a verbose/trace flag? I can't see it in the documentation
- Is there anything to pay attention to beyond the "scheduling" option? Any hunch for what may be causing this issue for me to start looking at in generating an example?
- 主要言語
- R
- スター
- 87
- フォーク
- 10
- PR マージ指標
- 30日以内にマージされた PR はありません
コントリビューションガイド
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
futureverse/future.batchtools のほかの issue
-
feature/resources scheduler/lsf
難易度 2/5 1〜3時間 初心者へのやさしさ 68/100
futureverse/future.batchtools#105 ·
-
feature/resources scheduler/sge
難易度 4/5 3〜5日 初心者へのやさしさ 50/100
futureverse/future.batchtools#104 · コメント 1 件 ·
-
feature/resources scheduler/slurm
難易度 3/5 1〜2日 初心者へのやさしさ 66/100
futureverse/future.batchtools#103 ·
-
難易度 2/5 1〜3時間 初心者へのやさしさ 55/100
futureverse/future.batchtools#102 ·
-
難易度 4/5 3〜5日 初心者へのやさしさ 15/100
futureverse/future.batchtools の issue をすべて見る
似ている issue
-
難易度 2/5 1〜3時間 初心者へのやさしさ 75/100
easystats/performance#950 ·
-
難易度 2/5 1〜3時間 初心者へのやさしさ 70/100
-
難易度 2/5 1〜3時間 初心者へのやさしさ 75/100
briandconnelly/airnow#9 ·
-
bug
難易度 2/5 1〜3時間 初心者へのやさしさ 75/100
-
難易度 2/5 1〜3時間 初心者へのやさしさ 75/100
OHDSI/CohortConstructor#774 ·