`kafka_event_aggregator`: backpressure
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 5/5
- Thời gian dự kiến
- Hơn một tuần
- Mức phù hợp với người mới
- 45/100
- Loại issue
- Tính năng
- Độ rõ ràng
- Khá rõ ràng
- Mức độ hoạt động
- Sôi nổi
- Công nghệ
- kafka
- Lĩnh vực
- stream-processing
Hướng nghiên cứu
Bắt đầu tại điểm vào kafka_event_aggregator và theo dõi cách kích thước hàng đợi của producer, các lần đọc của consumer và ranh giới frame được xử lý. Xác định các ngưỡng N/M và xác nhận việc tạm dừng giữa frame nên hoạt động như thế nào; hoàn thành có nghĩa là việc tạm dừng và khôi phục consumer, các cảnh báo và các metric tạm dừng được triển khai mà không làm mất hoặc xử lý sai các frame chưa hoàn chỉnh.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
If producer queue fills beyond N bytes, pause consumer until it recovers to less than M bytes (and provide warnings + metrics about consumer pause).
(need to consider behaviour on pausing consumer mid-frame - we are likely to get partial frames in that case)
- Ngôn ngữ chính
- Không có dữ liệu ngôn ngữ
- Star
- 0
- Fork
- 0
- Chỉ số merge pull request
- Không có pull request nào được merge trong 30 ngày
Hướng dẫn đóng góp
Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của ISISComputingGroup/DataStreaming
-
ISISComputingGroup/DataStreaming#115 · 1 người được giao ·
-
Filewriter: implement structure Đang mở
ISISComputingGroup/DataStreaming#114 · 1 người được giao ·
-
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 35/100
-
Độ khó 3/5 1-2 ngày Mức phù hợp với người mới 48/100
-
`kafka_dae_control`: unset pause on runstart, or set it if doing an explicit `begin(paused=True)` Đang mở
ISISComputingGroup/DataStreaming#109 · 1 bình luận · 1 người được giao ·
Tất cả issue của ISISComputingGroup/DataStreaming
Issue tương tự
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 86/100
membraneframework/boombox#149 · 1 người được giao ·
-
automation flaky-test Integration:kafka_input_otel Team:obs-ds-intake-services
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 70/100
elastic/integrations#21346 ·
-
priority: P2
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 82/100
vectordotdev/vector#26389 ·