count_cpus() and RAM crash with FileNotFoundError when SLURM_JOB_ID is set but scontrol is missing
メンテナーはふだん 2 日以内に返信
まだ誰も着手していません。
評価
調査の方向性
codecarbon/core/util.py の count_cpus() と codecarbon/external/ram.py の RAM._read_slurm_scontrol() から始め、既存の CalledProcessError のフォールバック処理を調べてください。scontrol がない各ケースのテストを追加し、どちらも警告を出してマシンの CPU 数または RAM の総量にフォールバックすることを確認してください。
索引モデルが issue の本文から書いたものです。
説明
Problem
count_cpus() (codecarbon/core/util.py) and RAM._read_slurm_scontrol() (codecarbon/external/ram.py) only catch subprocess.CalledProcessError. When SLURM_JOB_ID is set but the scontrol binary is not on PATH, subprocess.check_output raises FileNotFoundError instead, which is not caught.
This happens for example when a job runs inside a container (Docker / Apptainer) launched by SLURM: the SLURM env vars propagate but the SLURM client tools are not installed. The tracker then records no emissions and tracker.stop() returns None.
Reproduction
SLURM_JOB_ID=123 python -c "from codecarbon.core.util import count_cpus; count_cpus()"
# FileNotFoundError: [Errno 2] No such file or directory: 'scontrol'
Expected
Fall back to the machine's CPU count / total RAM with a warning, the same way the existing CalledProcessError path does.
Proposed fix
Catch (subprocess.CalledProcessError, FileNotFoundError) in both places and add a test for each. Happy to open a PR.
- 主要言語
- Python
- スター
- 1.9k
- フォーク
- 347
- 平均マージ
- 2日 13時間
- マージ済み PR（30日）
- 20
環境構築
- Dockerfile または Docker Compose ファイルあり
- プルリクエストのテンプレートあり
- コントリビューションガイドを読む
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
mlco2/codecarbon のほかの issue
-
Unit tests on Windows: 13 failures besides the CLI ones in #1459 (one also on any machine with an NVIDIA GPU)対応中かも このイシューにリンクされたプルリクエストがオープン中、またはマージ済みです。 オープン
難易度 2/5 1〜3時間 初心者へのやさしさ 76/100
mlco2/codecarbon#1460 · コメント 1 件 ·
メンテナーはふだん 2 日以内に返信
-
get_cloud_geo_region() returns NaN instead of the city for GCP regions with no state対応中かも @Maduk86 が 3 日前に担当しました。 オープン
難易度 2/5 1〜3時間 初心者へのやさしさ 86/100
mlco2/codecarbon#1456 · コメント 1 件 · 担当者 1 名 ·
メンテナーはふだん 2 日以内に返信
-
CLI: get_config() returns None without [codecarbon] section; get_api_endpoint() appends api_endpoint under wrong section対応中かも @sohammishra864-wq が 31 日前に担当しました。 オープン
難易度 2/5 半日 初心者へのやさしさ 82/100
mlco2/codecarbon#1432 ·
メンテナーはふだん 2 日以内に返信
-
Update the screen shot of the dashboard対応中かも @KLGani が 5 日前に担当しました。 オープンdocumentation good first issue
難易度 2/5 1〜3時間 初心者へのやさしさ 72/100
mlco2/codecarbon#1423 · コメント 5 件 ·
メンテナーはふだん 2 日以内に返信
-
Update the bibtex citation対応中かも @davidberenstein1957 が 79 日前に担当しました。 オープンdocumentation good first issue
難易度 2/5 1〜3時間 初心者へのやさしさ 68/100
mlco2/codecarbon#1422 · コメント 5 件 ·
メンテナーはふだん 2 日以内に返信
mlco2/codecarbon の issue をすべて見る
似ている issue
-
bug
難易度 1/5 1時間未満 初心者へのやさしさ 86/100
awslabs/visual-asset-management-system#937 ·
メンテナーはふだん 1 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 68/100
-
follow-up
難易度 2/5 1〜3時間 初心者へのやさしさ 78/100
メンテナーはふだん 1 日以内に返信
-
難易度 1/5 1時間未満 初心者へのやさしさ 83/100
メンテナーはふだん 3 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 70/100
メンテナーはふだん 2 日以内に返信