apache/dolphinscheduler

[Improvement][Helm Chart] Support HDFS HA

Open

#16.390 geöffnet am 29. Juli 2024

Auf GitHub ansehen
 (0 Kommentare) (0 Reaktionen) (0 zugewiesene Personen)Java (4.324 Forks)batch import
help wantedimprovementkubernetes

Repository-Metriken

Stars
 (11.659 Stars)
PR-Merge-Metriken
 (Durchschn. Merge 1T 17h) (22 gemergte PRs in 30 T)

Beschreibung

Search before asking

  • I had searched in the issues and found no similar feature requirement.

Description

The helm chart support HDFS HA.

Use case

Now, the config option has "resource.hdfs.fs.defaultFS". And the comment say "if resource.storage.type=HDFS and namenode HA is enabled, you need to copy core-site.xml and hdfs-site.xml to conf dir", but the template not use the "conf" dir or "config" dir. The pod only mount common.properties.

I want some ways to support HDFS enabled HA. Maybe some option for the xml files in common.properties, or some mount.

And, i m using HDFS deployed by stackable hdfs operator, the core-site.xml and hdfs-site.xml are ConfigMaps. Maybe some way can use this.

Related issues

No response

Are you willing to submit a PR?

  • Yes I am willing to submit a PR!

Code of Conduct

Contributor Guide

Research-Richtung
Ändern Sie das Helm Diagramm, um das Mounten zusätzlicher Konfigurationsdateien (core site.xml, hdfs site.xml) von ConfigMaps oder Secrets zu ermöglichen. Aktualisieren Sie die Vorlage, um auf diese Dateien zu verweisen, und fügen Sie eine Option in values.yaml hinzu, um die ConfigMap Namen anzugeben. Testen Sie mit einem echten HDFS HA Cluster.
Tech Stack
javakubernetes
Domain
backendinfrastructuredevops
Issue Type
Funktion
SchwierigkeitGeschätzte Implementierungsschwierigkeit für neue Contributors, von 1 für sehr kleine Änderungen bis 5 für Expertenarbeit.
3
Geschätzte ZeitEin grober Zeitrahmen, um zu recherchieren, zu implementieren, zu testen und einen Pull Request vorzubereiten.
1-2 Tage
AktivitätsstatusWie verfügbar das Issue gerade wirkt: frisch, aktiv, stale, blockiert oder wartet auf Maintainer-Input.
Frisch
KlarheitWie klar das Issue die erwartete Änderung, Akzeptanzkriterien und den nächsten Schritt erklärt.
Klar
Voraussetzungen
KubernetesHelmHDFS
EinsteigerfreundlichkeitEin Score von 1 bis 100, der schätzt, wie zugänglich dieses Issue für First-Time Contributors ist.
60