apache/pinot

End-to-end integration test for Kinesis connector

Open

#6 992 ouverte le 27 mai 2021

Voir sur GitHub
 (7 commentaires) (0 réactions) (1 assigné)Java (1 234 forks)batch import
good first issuehelp wantedkinesis

Métriques du dépôt

Stars
 (4 937 stars)
Métriques de merge PR
 (Merge moyen 6j 7h) (186 PRs mergées en 30 j)

Description

We added Kinesis integration https://github.com/apache/incubator-pinot/pull/6661 We need an integration test which can start Kinesis locally, and then test the whole realtime consumption end to end.

Guide contributeur

Direction de recherche
Implémentez un test d'intégration de bout en bout pour le connecteur Kinesis en démarrant une instance Kinesis locale (par exemple en utilisant Kinesalite ou LocalStack), en configurant le connecteur Pinot pour en consommer, et en vérifiant que l'ingestion de données en temps réel fonctionne correctement.
Stack technique
java
Domaine
backend
Type d'issue
Test
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
2
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
Une demi journée
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Active
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
JavaDocker
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
70