vectordotdev/vector

MessagePack codec (or VRL functions)

Open

#8,675 opened on 2021年8月12日

GitHub で見る
 (2 comments) (8 reactions) (0 assignees)Rust (21,837 stars) (2,126 forks)batch import
domain: codecsdomain: vrlgood first issuetype: featurevrl: stdlib

説明

We have a Kafka topic with msgpack events we would like to deserialize (and reserialize after some transformations in an other topic). Currently, we use Logstash for that with this plugin : https://github.com/logstash-plugins/logstash-codec-msgpack

It could be very useful to have a generic msgpack codec in Vector like for JSON format, maybe in the form of a pair VRL functions parse_msgpack / encode_msgpack ?

コントリビューターガイド

技術スタック
rustkafka
領域
backenddata
Issue 種別
feature
難度新しい貢献者にとっての実装難度です。1 は非常に小さな変更、5 は専門的な作業です。
3
推定時間経験ある貢献者が調査、実装、テスト、pull request 準備にかけるおおよその時間範囲です。
3-5 days
活動状況Issue が今どれだけ取り組みやすいかを示します。新しい、活発、古い、ブロック中、またはメンテナー入力待ちなどです。
stale
明確さ期待される変更、受け入れ条件、次の手順がどれだけ明確かを示します。
clear
前提条件
Rust programmingVector codebase basicsMessagePack format
初心者向け度初回貢献者にどれだけ取り組みやすいかを 1-100 で推定したスコアです。
40
調査方針
Review existing codec implementations (e.g., JSON codec) in the Vector codebase, likely under src/codecs/. Consider using the rmp (rmp serde) crate for MessagePack serialization. If implementing VRL functions, examine the VRL standard library for existing parse/encode functions (e.g., parse json, encode json) and follow that pattern. Check issue comments for any additional requirements. No linked PRs or assignees, so the issue is open for contribution.