希望flinkStreamSQL 1.10的Kafka数据源可以像flink原生版一样支持group-offsets模式

オープン
#354 コメント 6 件 リアクション 5 件 担当者 0 名 GitHub で見る

まだ誰も着手していません。

評価

難易度
4/5
見積もり時間
3〜5日
初心者へのやさしさ
35/100
issue の種類
機能追加
明瞭さ
おおむね明確
活発さ
停滞
技術スタック
java, kafka, sql

調査の方向性

issue にはファイル、テスト、エントリポイントのいずれも記載されていません。まず FlinkStreamSQL 1.10 の Kafka ソース設定とその offset モードの処理箇所を特定し、次に Flink の group-offsets の動作と比較してください。設定された groupId がコミット済みのグループオフセットから再開し、新しいグループに対しては初期の latest または earliest の動作を維持できれば完了です。

索引モデルが issue の本文から書いたものです。

説明

flinkStreamSQL 1.10的Kafka数据源不支持group-offsets模式,Flink原生版支持的。 在实际应用中,最常用的就是这个模式,Flink原生版本只要设置了groupId, 即使是latest和earlist两种offset模式, 也只是在groupId有新值时,从最新或者最初始开始读,其后就是按照group-offsets来读取的,这样就可以保证任务重启后,准确地衔接上。 希望大佬们可以让flinkStreamSQL 也支持group-offset模式。

主要言語
Java
スター
2k
フォーク
913
PR マージ指標
30日以内にマージされた PR はありません

コントリビューションガイド

このリポジトリのコントリビューションガイドは索引されていません

はじめの一歩

  1. issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
  2. 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
  3. リポジトリをフォークし、ブランチを切って変更します。
  4. issue 番号を参照したプルリクエストを送ります。

DTStack/flinkStreamSQL のほかの issue

DTStack/flinkStreamSQL の issue をすべて見る

似ている issue

Java の issue をもっと見る

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。