apache/pinot

End-to-end integration test for Kinesis connector

Open

#6992 aperta il 27 mag 2021

Vedi su GitHub
 (7 commenti) (0 reazioni) (1 assegnatario)Java (1234 fork)batch import
good first issuehelp wantedkinesis

Metriche repository

Star
 (4937 star)
Metriche merge PR
 (Merge medio 6g 7h) (186 PR mergiate in 30 g)

Descrizione

We added Kinesis integration https://github.com/apache/incubator-pinot/pull/6661 We need an integration test which can start Kinesis locally, and then test the whole realtime consumption end to end.

Guida contributor

Direzione di ricerca
Implementa un test di integrazione end to end per il connettore Kinesis avviando un'istanza Kinesis locale (ad esempio usando Kinesalite o LocalStack), configurando il connettore Pinot per consumare da essa, e verificando che l'ingestione dati in tempo reale funzioni correttamente.
Tech stack
java
Dominio
backend
Tipo issue
Test
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
2
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Mezza giornata
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
JavaDocker
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
70