Performance Regression or Improvement: test_cloudml_benchmark_criteo_10GB-runtime_sec:runtime_sec

Đang mở
  • Có gì không ổn?
#41,089 0 bình luận 0 reaction 0 người được giao Xem trên GitHub

Maintainer thường phản hồi trong vòng 1 ngày

Chưa có ai nhận issue này.

Đánh giá

Độ khó
4/5
Thời gian dự kiến
3-5 ngày
Mức phù hợp với người mới
35/100
Loại issue
Lỗi
Độ rõ ràng
Khá rõ ràng
Mức độ hoạt động
Sôi nổi
Công nghệ
python, tensorflow
Lĩnh vực
data-engineering, performance

Hướng nghiên cứu

Start with the triage guidance in sdks/python/apache_beam/testing/analyzers/README.md and inspect the benchmark referenced in sdks/python/apache_beam/testing/benchmarks/cloudml/cloudml_benchmark_test.py. Compare the anomalous runtime with nearby measurements and investigate what changed in the benchmark or its execution environment. Done means the performance alert is explained and any confirmed regression has a clear resolution.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Mô tả

awaiting triage perf-alert

Performance change found in the
test: test_cloudml_benchmark_criteo_10GB-runtime_sec for the metric: runtime_sec.

For more information on how to triage the alerts, please look at
Triage performance alert issues section of the README.

Test description: TFT Criteo test on 10 GB data.
Test link - https://github.com/apache/beam/blob/42d0a6e3564d8b9c5d912428a6de18fb22a13ac1/sdks/python/apache_beam/testing/benchmarks/cloudml/cloudml_benchmark_test.py#LL104C7-L104C41


timestamp: Sun Nov  8 01:46:38 2026, metric_value: 2622.62
timestamp: Sat Nov  7 22:54:32 2026, metric_value: 2670.46
timestamp: Fri Nov  6 22:54:34 2026, metric_value: 2617.58
timestamp: Thu Nov  5 22:46:00 2026, metric_value: 2341.57 <---- Anomaly
timestamp: Wed Nov  4 23:08:40 2026, metric_value: 2956.38
timestamp: Tue Nov  3 23:04:19 2026, metric_value: 2959.26
timestamp: Mon Nov  2 23:03:59 2026, metric_value: 2993.29
timestamp: Sun Nov  1 23:07:41 2026, metric_value: 2942.03
timestamp: Sat Oct 31 23:00:36 2026, metric_value: 2865.71
timestamp: Fri Oct 30 23:04:56 2026, metric_value: 3040.11
timestamp: Thu Oct 29 23:09:40 2026, metric_value: 2988.82
timestamp: Wed Oct 28 23:11:51 2026, metric_value: 3360.26
timestamp: Wed Oct 28 22:05:18 2026, metric_value: 3085.76
timestamp: Tue Oct 27 23:09:30 2026, metric_value: 2958.39
Ngôn ngữ chính
Java
Star
8.7k
Fork
4.8k
Merge trung bình
2 ngày 12 giờ
Pull request đã merge (30 ngày)
371

Chuẩn bị môi trường

Bắt đầu từ đâu

  1. Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
  2. Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
  3. Fork repository và làm thay đổi trên một nhánh.
  4. Mở pull request có tham chiếu số hiệu của issue.

Issue khác của apache/beam

Tất cả issue của apache/beam

Issue tương tự

Thêm issue về Java

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.