apache/dolphinscheduler

[Improvement][Helm Chart] Support HDFS HA

Open

#16 390 ouverte le 29 juil. 2024

Voir sur GitHub
 (0 commentaires) (0 réactions) (0 assignés)Java (4 324 forks)batch import
help wantedimprovementkubernetes

Métriques du dépôt

Stars
 (11 659 stars)
Métriques de merge PR
 (Merge moyen 1j 17h) (22 PRs mergées en 30 j)

Description

Search before asking

  • I had searched in the issues and found no similar feature requirement.

Description

The helm chart support HDFS HA.

Use case

Now, the config option has "resource.hdfs.fs.defaultFS". And the comment say "if resource.storage.type=HDFS and namenode HA is enabled, you need to copy core-site.xml and hdfs-site.xml to conf dir", but the template not use the "conf" dir or "config" dir. The pod only mount common.properties.

I want some ways to support HDFS enabled HA. Maybe some option for the xml files in common.properties, or some mount.

And, i m using HDFS deployed by stackable hdfs operator, the core-site.xml and hdfs-site.xml are ConfigMaps. Maybe some way can use this.

Related issues

No response

Are you willing to submit a PR?

  • Yes I am willing to submit a PR!

Code of Conduct

Guide contributeur

Direction de recherche
Modifiez le chart Helm pour permettre le montage de fichiers de configuration supplémentaires (core site.xml, hdfs site.xml) à partir de ConfigMaps ou de secrets. Mettez à jour le modèle pour référencer ces fichiers et ajoutez une option dans values.yaml pour spécifier les noms des ConfigMaps. Testez avec un cluster HDFS HA réel.
Stack technique
javakubernetes
Domaine
backendinfrastructuredevops
Type d'issue
Fonctionnalité
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
3
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
1-2 jours
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
Récente
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
Claire
Prérequis
KubernetesHelmHDFS
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
60