vectordotdev/vector

New `azure_event_hubs` sink

Open

#2434 aperta il 23 apr 2020

Vedi su GitHub
 (12 commenti) (9 reazioni) (0 assegnatari)Rust (2126 fork)batch import
domain: sinksgood first issuehave: shouldneeds: approvalprovider: azuresink: new

Metriche repository

Star
 (21.837 star)
Metriche merge PR
 (Merge medio 5g 12h) (85 PR mergiate in 30 g)

Descrizione

Azure Event Hubs is like a managed Kafka service:

Allow existing Apache Kafka clients and applications to talk to Event Hubs without any code changes—you get a managed Kafka experience without having to manage your own clusters.

This suggests that we could wrap the existing kafka sink. I'd prefer that we wrap it since it is technically a different service. We also get the marketing benefit (guides, ets) when we create a new sink.

Guida contributor

Direzione di ricerca
Esamina l'implementazione esistente del sink Kafka in Vector (probabilmente in `src/sinks/kafka.rs`) per comprendere il modello di wrapping. Quindi adattalo per utilizzare le librerie client di Azure Event Hubs, potenzialmente sfruttando l'Azure SDK per Rust. Rivedi i commenti dell'issue per ulteriore contesto sui requisiti. Testa con un'istanza di esempio di Azure Event Hubs per garantire un'integrazione corretta.
Tech stack
rust
Dominio
backendclouddata
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
1-2 giorni
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Datata
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
Basic RustVector sink architectureAzure Event Hubs basicsExisting Kafka sink code
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
60