Hacktoberfest 2026: những issue maintainer đã đánh dấu cho tháng Mười, đang mở và phù hợp người mới. Xem issue Hacktoberfest

ServerlessBackend creates a new W&B run per training step, causing "Run finished" alerts to fire on every step

Đang mở
  • Có gì không ổn?
#638 0 bình luận 0 reaction 0 người được giao Xem trên GitHub

Maintainer thường phản hồi trong vòng 3 ngày

Chưa có ai nhận issue này.

Đánh giá

Độ khó
4/5
Thời gian dự kiến
3-5 ngày
Mức phù hợp với người mới
48/100
Loại issue
Lỗi
Độ rõ ràng
Khá rõ ràng
Mức độ hoạt động
Ít trao đổi
Công nghệ
python
Lĩnh vực
backend, machine-learning

Hướng nghiên cứu

Bắt đầu bằng cách lần theo ServerlessBackend từ model.register() qua backend.train() đến backend.close(), và kiểm tra cách mỗi lệnh gọi huấn luyện tạo run W&B của nó. Tái hiện vòng lặp trong issue và đánh giá tùy chọn wandb.Settings hiện có; được xem là hoàn thành khi một phiên huấn luyện không còn tạo cảnh báo „Run finished“ không mong muốn cho mỗi bước.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Mô tả

Hi, I ran into an issue while training with ServerlessBackend.

Problem

When using ServerlessBackend, each call to backend.train() creates a separate W&B run. This means that if "Run
finished" Slack notifications are enabled in W&B User Settings, a notification is sent on every training step — 50
steps means 50 Slack notifications, which is extremely noisy in practice.

Reproduction

for step in range(NUM_STEPS):
    finished = await art.gather_trajectory_groups(groups)
    result = await backend.train(model, finished, learning_rate=1e-5)
    # ↑ Each call creates and finishes a separate W&B run

Expected behavior

One of the following would address this:

  • Consolidate the entire training session (model.register() through backend.close()) into a single W&B run
  • Handle per-step runs in a way that does not trigger W&B alerts (e.g. via wandb.Settings)
  • Provide a user-configurable option to control this behavior

Workaround

Currently the only option is to disable "Run finished" notifications globally in W&B User Settings, but this silences
notifications for all projects — not ideal. W&B does not currently support per-project alert configuration.

Thanks for the great library!

Ngôn ngữ chính
Python
Star
10.8k
Fork
989
Merge trung bình
11 giờ 38 phút
Pull request đã merge (30 ngày)
104

Chuẩn bị môi trường

Bắt đầu từ đâu

  1. Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
  2. Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
  3. Fork repository và làm thay đổi trên một nhánh.
  4. Mở pull request có tham chiếu số hiệu của issue.

Issue khác của OpenPipe/ART

Tất cả issue của OpenPipe/ART

Issue tương tự

Thêm issue về Python

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.