Speed up CI: split tests across machines + fix hot spec files (cruft removal won't help)

Đang mở
#2,933 0 bình luận 0 reaction 0 người được giao Xem trên GitHub

Maintainer thường phản hồi trong vòng 1 ngày

Chưa có ai nhận issue này.

Đánh giá

Độ khó
4/5
Thời gian dự kiến
3-5 ngày
Mức phù hợp với người mới
30/100
Loại issue
Tái cấu trúc
Độ rõ ràng
Khá rõ ràng
Mức độ hoạt động
Sôi nổi
Công nghệ
github-actions, ruby
Lĩnh vực
ci-cd, testing

Hướng nghiên cứu

Start with the timing table: the hot spec files are spec/requests/dedupable_spec.rb, spec/services/tag_alias_seeder_spec.rb and spec/requests/events_spec.rb, and the test step runs under parallel_rspec. Splitting jobs across matrix runs means changing the CI workflow, which the payload does not name, so confirm the maintainers want that before starting. Done means a measured drop in wall-clock CI time, with the 17 pending examples handled separately.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Mô tả

blocked

🤖 From Claude:

CI takes 11–13 min. Deleting old/redundant specs won't fix that: removing every cruft candidate saves only about 25s. The time goes to the test step itself and a handful of slow spec files.

Measured from the per-example timing files of one green CI run (12,769 examples).

Where the time goes (one run, 11 min total)

Step Time
Setup (containers, Ruby, npm, Vite build, DBs) ~1:40
parallel_rspec, 4 processes 9:21
  • Total example time is 34.6 min, split 4 ways. Processes finished between 7:50 and 9:14.
  • By directory: requests 16.2 min (47%), services 8.0, system 3.8, models 3.4, everything else ~3.
  • Factories are cheap (2–40ms per create), so they aren't the cause.

Cruft: low value

Candidate Examples Total time Wall-clock saved
Auth-gate request specs (guest / regular user / denied) 463 1.0 min ~15s
View specs 563 0.5 min ~8s
Scaffold-style request specs 101 0.1 min ~2s
Pending/skipped examples 17 0 0
  • Delete or fix the 17 pending examples for hygiene. It won't speed anything up.
  • Keep the auth-gate specs. They're cheap and check the real routing and redirects.

Real levers

  1. Split tests across 2–3 GitHub Actions matrix jobs (biggest win)

    • 2 machines × 4 processes → tests ~4.5 min, CI ~6.5 min. 3 machines → CI ~5 min.
    • Repo is public, so standard runners are free.
    • parallel_rspec --only-group lets each job take a share.
  2. Speed up the hot files. The top 12 files are ~35% of all example time:

    File Time Examples Per example
    spec/requests/dedupable_spec.rb 124s 113 ~1.1s
    spec/requests/events_spec.rb 81s 413
    spec/services/event_registration_services/public_registration_spec.rb 77s 110 0.7s
    spec/requests/people_dedupe_professional_licenses_spec.rb 68s 31 2.2s
    spec/services/event_dashboard_spec.rb 57s 143
    spec/services/tag_alias_seeder_spec.rb 46s 23 2s (runs the whole seeder in every example)
    • Running heavy setup once per file instead of once per example could roughly halve these, saving ~1.5 min wall clock.
  3. Group by runtime instead of file size

    • Record a runtime log (ParallelTests::RSpec::RuntimeLogger) and use --group-by runtime.
    • Evens out the 7:50 vs 9:14 spread, saving ~30–40s.
  4. Two slow system specs (11–13s each), low priority

    • community_news_index_spec.rb:170 and notification_incoming_responded_spec.rb:8.
    • Probably slow only because they run first in their process and wait for Chrome to start.
Ngôn ngữ chính
Ruby
Star
15
Fork
28
Merge trung bình
14 giờ 29 phút
Pull request đã merge (30 ngày)
292

Chuẩn bị môi trường

Mở trong Codespaces

Khởi chạy dev container của dự án ngay trên trình duyệt, bằng tài khoản GitHub của bạn.

Bắt đầu từ đâu

  1. Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
  2. Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
  3. Fork repository và làm thay đổi trên một nhánh.
  4. Mở pull request có tham chiếu số hiệu của issue.

Issue khác của rubyforgood/awbw

Tất cả issue của rubyforgood/awbw

Issue tương tự

Thêm issue về Ruby

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.