Ensure all state is shared across NiFi 2 cluster members
Nadie ha tomado este issue todavía.
Evaluación
- Dificultad
- 5/5
- Tiempo estimado
- Más de una semana
- Aptitud para principiantes
- 20/100
- Tipo de issue
- Nueva funcionalidad
- Claridad
- Necesita aclaración
- Estado de actividad
- Estancado
- Stack tecnológico
- kubernetes
- Área
- distributed-systems
Línea de trabajo
Empieza revisando NIFI-7246 y los issues vinculados 809 y 811 para identificar qué estado de NiFi permanece local en los miembros del clúster. Después, analiza la viabilidad con los mantenedores de NiFi e investiga el fork de NiFi propuesto; se considera terminado cuando se documentan los bloqueos o se consigue un estado compartido que admita miembros con balanceo de carga sin Sticky Sessions.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
Part of https://github.com/stackabletech/nifi-operator/issues/809.
Why?
This opens the door for fixing the Oauth2 implementation which solves problems for many (including us).
Current state
Although it is termed a NiFi cluster, cluster members are not exactly replicas, and hold local state.
One example of local state is a Site-to-Site flowfile transfer to another cluster. Currently, to get the status of a transfer, you must connect to the node that you initiated the transfer on.
This might be the reason for the following:
- A JWT issuer per cluster memeber (tokens cannot be used on other cluster members)
- SNI hostname checks
Future state
All cluster state should be shared to cluster members so that cluster members can actually be replicas, and therefore sit behind a load balancer without needing sticky-sessions.
Recommended approach
- Try to find any reason why some state cannot be shared across cluster members.
- Start a conversation with NiFi maintainers to gauge interest in accepting this fix upstream.
- Fork NiFi and try to share the currently unshared state across cluster members.
Unknowns
- Which other state is local only? Perhaps the answer can be found in NIFI-7246
- Lenguaje dominante
- Rust
- Estrellas
- 48
- Forks
- 12
- Merge medio
- 11 h 26 min
- PR fusionados (30 d)
- 10
Guía de contribución
No hay ninguna guía de contribución indexada para este repositorio
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de stackabletech/nifi-operator
-
Dificultad 3/5 1-2 días Aptitud para principiantes 68/100
stackabletech/nifi-operator#956 ·
-
Dificultad 4/5 3-5 días Aptitud para principiantes 45/100
stackabletech/nifi-operator#879 ·
-
customer-request type/bug
Dificultad 3/5 1-2 días Aptitud para principiantes 42/100
stackabletech/nifi-operator#842 · 1 comentario ·
-
size/M type/security
Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100
stackabletech/nifi-operator#811 · 1 comentario ·
-
Fix NiFi 2 clustering Abiertoepic size/XL type/security
Dificultad 5/5 Más de una semana Aptitud para principiantes 15/100
stackabletech/nifi-operator#809 ·
Todos los issues de stackabletech/nifi-operator
Issues similares
-
bug github_actions
Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100
registrystack/registry-stack#1393 ·
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100
longbridge/gpui-kit#3223 ·
-
bug engine
Dificultad 2/5 1-3 horas Aptitud para principiantes 65/100
rocky-data/rocky#2181 ·
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 70/100
oasisprotocol/oasis-sdk#2523 ·
-
[indexer] [QA] Add a focused test for the new NonRetryableError / assertSocketAlive() behavior. Abiertobot:ai-assisted component:indexer QA-roadmap status:untriaged
Dificultad 2/5 1-3 horas Aptitud para principiantes 75/100
midnightntwrk/midnight-indexer#1557 ·