Fix and improve rt-tests result processing

Đang mở
  • Có gì không ổn?
#2,102 0 bình luận 0 reaction 0 người được giao Xem trên GitHub

Maintainer thường phản hồi trong vòng 2 ngày

Chưa có ai nhận issue này.

Đánh giá

Độ khó
5/5
Thời gian dự kiến
Hơn một tuần
Mức phù hợp với người mới
35/100
Loại issue
Tính năng
Độ rõ ràng
Cần làm rõ
Mức độ hoạt động
Sôi nổi
Công nghệ
python
Lĩnh vực
performance, testing-qa

Hướng nghiên cứu

Bắt đầu bằng cách đọc parse_rt_tests_results.py và theo dõi cách các tham số gọi cyclictest, các dòng độ trễ, mã trả về và các giá trị đo được trở thành kết quả. Làm rõ cấu hình ngưỡng và các quy tắc đánh giá theo luồng rt-tests hiện có, sau đó xác minh rằng các kết quả pass/fail có ý nghĩa được truyền tới các thông báo và báo cáo hồi quy.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Mô tả

Context

Investigation following user feedback uncovered issues in the current rt-tests processing.

In particular:
• cyclictest results currently do not appear to have meaningful latency thresholds configured.
• parse_rt_tests_results.py reports latency lines as passing, with the overall result primarily determined by the cyclictest return code.
• As a result, simply providing a maximum value would not be sufficient unless the parser also understands and evaluates the threshold.

Goal

Review and improve how KernelCI interprets rt-tests, particularly cyclictest, so that reported pass/fail results represent meaningful latency expectations.

Tasks / points to investigate
• Define how cyclictest thresholds should be configured.
• Update result parsing to evaluate those thresholds.
• Ensure failures are represented correctly in KernelCI.
• Review how invocation parameters and measured values are exposed.
• Determine how this should integrate with notifications and regression reporting.

Ngôn ngữ chính
Python
Star
10
Fork
31
Merge trung bình
4 ngày 3 giờ
Pull request đã merge (30 ngày)
30

Chuẩn bị môi trường

Bắt đầu từ đâu

  1. Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
  2. Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
  3. Fork repository và làm thay đổi trên một nhánh.
  4. Mở pull request có tham chiếu số hiệu của issue.

Issue khác của kernelci/dashboard

Tất cả issue của kernelci/dashboard

Issue tương tự

Thêm issue về Python

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.