Support DIGEST-MD5 / delegation token authentication for HMS

Geschlossen

#3,145 erstellt am 12.3.2026 1 Kommentar 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen

Dieses Issue hat noch niemand übernommen.

Bewertung

Schwierigkeit: 5/5
Geschätzter Aufwand: Über eine Woche
Anfängerfreundlichkeit: 45/100

Issue-Typ: Feature
Klarheit: Größtenteils klar
Aktivitätsstatus: Aktiv
Tech-Stack: hadoop, python
Bereich: backend, databases

Rechercherichtung

Beginne mit _HiveClient und dem bestehenden hive.kerberos-authentication-Pfad, untersuche anschließend, wie TSaslClientTransport konfiguriert wird. Die Arbeit ist abgeschlossen, wenn DIGEST-MD5 die Hadoop Writable credentials aus $HADOOP_TOKEN_FILE_LOCATION liest und die Token-ID sowie das Passwort für die HMS-Authentifizierung verwendet.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Beschreibung

stale

Feature Request / Improvement

Summary

PyIceberg's HiveCatalog supports Kerberos (GSSAPI) authentication via hive.kerberos-authentication, but does not support DIGEST-MD5 SASL authentication with Hadoop delegation tokens. In many production Hadoop environments, pods/containers authenticate to HMS using delegation tokens (read from $HADOOP_TOKEN_FILE_LOCATION) rather than Kerberos keytabs. This means PyIceberg's Hive catalog cannot be used in these environments without building a custom client.

Proposed Enhancement

Extend _HiveClient to support DIGEST-MD5 delegation token auth:

Add a new config property (e.g. hive.metastore.authentication=DIGEST-MD5)
When DIGEST-MD5 is configured, read credentials from $HADOOP_TOKEN_FILE_LOCATION (Hadoop Writable credentials format)
Use TSaslClientTransport with mechanism=DIGEST-MD5 and the extracted token identifier/password

Vorherrschende Sprache: Python
Sterne: 1.1k
Forks: 589
Ø Merge: 1 T. 20 Std.
Gemergte PRs (30 T.): 68

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Erste Schritte

Lesen Sie das ganze Issue und danach den Beitragsleitfaden des Projekts.
Schreiben Sie ins Issue, dass Sie es übernehmen — das erspart doppelte Arbeit.
Forken Sie das Repository und arbeiten Sie in einem Branch.
Öffnen Sie einen Pull Request, der die Issue-Nummer nennt.

Mehr aus apache/iceberg-python

Move AES GCM fixtures to Iceberg-verification Offen

Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 70/100

apache/iceberg-python#4010 · 1 Reaktion · Erstellt am 23.9.2026
Avro EnumReader.skip() does not advance the decoder Offen

kind:bug

Schwierigkeit 1/5 Unter einer Stunde Anfängerfreundlichkeit 92/100

apache/iceberg-python#4006 · Erstellt am 22.9.2026
to_bytes silently rescales a Decimal with a negative scale Offen

Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 78/100

apache/iceberg-python#3996 · Erstellt am 18.9.2026
Deletion vector bitmap count is read from the blob and used as a loop bound without validation Offen

bug

Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 72/100

apache/iceberg-python#3979 · Erstellt am 16.9.2026
FsspecFileIO: `_adls` mutates shared properties, so a second storage account gets the first account's filesystem Offen

Schwierigkeit 2/5 1-3 Stunden Anfängerfreundlichkeit 78/100

apache/iceberg-python#3885 · Erstellt am 31.8.2026

Alle Issues in apache/iceberg-python