Hacktoberfest 2026: những issue maintainer đã đánh dấu cho tháng Mười, đang mở và phù hợp người mới. Xem issue Hacktoberfest

Compile Slurm configuration into deterministic execution plans

Đã đóng
  • Có gì không ổn?
#875 1 bình luận 0 reaction 1 người được giao Xem trên GitHub

Maintainer thường phản hồi trong vòng 1 ngày

@andreatnvidia đang làm issue này rồi.

Từ ngày 24/8/2026.

Đánh giá

Issue này chưa được đánh giá.

Mô tả

task
Priority Level

High

Task Summary

Resolve strict authored Slurm input and cluster profiles into an immutable, deterministic execution plan before any scheduler submission occurs.

Technical Details & Implementation Plan
  • Load and validate authored run configuration and the selected cluster profile.
  • Resolve Data Designer invocation inputs, deployments, images, resources, mounts, shard ranges, client placement, and output intent into package-owned plan records.
  • Keep authored semantics separate from resolved scheduler/runtime facts.
  • Produce stable plan serialization and digests suitable for pinning in run, shard, and attempt records.
  • Validate cross-field resource, placement, path, and deployment constraints before submission.
  • Provide pure planning entry points that require no Slurm commands or runtime services.
Acceptance criteria
  • The same authored input, profile, and referenced artifacts produce identical plan bytes and digests.
  • Invalid deployment, placement, resource, mount, shard, and destination combinations fail before submission.
  • Plans contain all inputs required by serving, image, launcher/runtime, client-worker, state, and benchmark lanes.
  • Plans contain no credentials, mutable source references, or unresolved environment-dependent defaults.
  • Unit and golden tests cover single-node, multi-node, multi-deployment, sharded, and invalid configurations.
Out of scope
  • Slurm submission or command parsing.
  • Starting model services or the Data Designer client.
  • State persistence, retry, collection, or benchmark execution.
Investigation / Context

This is the configuration-resolution and deterministic-plan lane in #850. #866 and #868 consume planner-supplied placement and resources but do not own authored configuration or plan compilation.

Agent Plan / Findings

Keep planning pure and deterministic so every side effecting lane consumes a reviewed immutable plan rather than re-resolving authored input.

Dependencies

Depends on the public contract in #851, the optional package foundations in #852 and #853, and the shared records in #873.

Ngôn ngữ chính
Python
Star
2.3k
Fork
211
Merge trung bình
3 ngày 12 giờ
Pull request đã merge (30 ngày)
45

Chuẩn bị môi trường

Bắt đầu từ đâu

  1. Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
  2. Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
  3. Fork repository và làm thay đổi trên một nhánh.
  4. Mở pull request có tham chiếu số hiệu của issue.

Issue khác của NVIDIA-NeMo/DataDesigner

Tất cả issue của NVIDIA-NeMo/DataDesigner

Issue tương tự

Thêm issue về Python

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.