`kafka_event_aggregator`: backpressure
还没有人认领这个 Issue。
评估
- 难度
- 5/5
- 预计耗时
- 一周以上
- 新手友好度
- 45/100
- Issue 类型
- 功能
- 描述清晰度
- 基本清楚
- 活跃度
- 活跃
- 技术栈
- kafka
调研方向
从 kafka_event_aggregator 入口开始,跟踪 producer 队列大小、consumer 读取和帧边界的处理方式。定义 N/M 阈值,并确认在帧中途暂停应如何工作;完成标准是已实现 consumer 暂停与恢复、警告和暂停指标,同时不丢失或错误处理部分帧。
由索引模型根据 Issue 内容生成。
描述
If producer queue fills beyond N bytes, pause consumer until it recovers to less than M bytes (and provide warnings + metrics about consumer pause).
(need to consider behaviour on pausing consumer mid-frame - we are likely to get partial frames in that case)
- 主要语言
- 没有语言数据
- 星标
- 0
- 派生
- 0
- PR 合并指标
- 30 天内没有已合并 PR
贡献指南
这个仓库没有索引到贡献指南
从这里开始
- 先读完整个 Issue,再读项目的贡献指南。
- 在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
- Fork 仓库,在一个分支上完成修改。
- 提交 Pull Request,并在描述里引用这个 Issue 编号。
ISISComputingGroup/DataStreaming 的其他 Issue
-
ISISComputingGroup/DataStreaming#115 · 已指派 1 人 ·
-
ISISComputingGroup/DataStreaming#114 · 已指派 1 人 ·
-
难度 4/5 3-5 天 新手友好度 35/100
-
难度 3/5 1-2 天 新手友好度 48/100
-
`kafka_dae_control`: unset pause on runstart, or set it if doing an explicit `begin(paused=True)` 未关闭
ISISComputingGroup/DataStreaming#109 · 1 条评论 · 已指派 1 人 ·
查看 ISISComputingGroup/DataStreaming 的全部 Issue
相似的 Issue
-
难度 2/5 1-3 小时 新手友好度 78/100
-
难度 2/5 1-3 小时 新手友好度 86/100
membraneframework/boombox#149 · 已指派 1 人 ·
-
automation flaky-test Integration:kafka_input_otel Team:obs-ds-intake-services
难度 2/5 1-3 小时 新手友好度 70/100
elastic/integrations#21346 ·
-
priority: P2
难度 2/5 1-3 小时 新手友好度 72/100
-
难度 2/5 1-3 小时 新手友好度 82/100
vectordotdev/vector#26389 ·