nteract/papermill

FutureWarning: pyarrow.HadoopFileSystem is deprecated as of 2.0.0, please use pyarrow.fs.HadoopFileSystem instead.

Open

#816 geöffnet am 31. Jan. 2025

Auf GitHub ansehen
 (0 Kommentare) (0 Reaktionen) (0 zugewiesene Personen)Python (402 Forks)batch import
bughelp wanted

Repository-Metriken

Stars
 (5.381 Stars)
PR-Merge-Metriken
 (Keine gemergten PRs in 30 T)

Beschreibung

🐛 Bug

[2025-01-31, 11:17:58 UTC] {{pod_manager.py:395}} INFO - [base] /usr/local/lib/python3.8/site-packages/papermill/iorw.py:50: FutureWarning: pyarrow.HadoopFileSystem is deprecated as of 2.0.0, please use pyarrow.fs.HadoopFileSystem instead. [2025-01-31, 11:17:58 UTC] {{pod_manager.py:395}} INFO - [base] from pyarrow import HadoopFileSystem

Hello community,

I'm running papermill in version 2.6.0 in python3.8 and I'm seeing this error, it should be already solved as I read here but I'm still able to see it, can you help me with that?

thank you so much.

Contributor Guide

Research-Richtung
Das Problem meldet eine Veraltungswarnung von pyarrow. Die Lösung besteht darin, `from pyarrow import HadoopFileSystem` durch `from pyarrow.fs import HadoopFileSystem` in der Datei `papermill/iorw.py` zu ersetzen. Um jedoch die Kompatibilität mit älteren Versionen von pyarrow zu gewährleisten, ist möglicherweise ein try except Block erforderlich. Überprüfen Sie, ob die Korrektur bereits in einer späteren Version von papermill angewendet wurde. Wenn nicht, reichen Sie einen PR mit der Änderung ein und stellen Sie sicher, dass die Tests bestehen.
Tech Stack
python
Domain
tooling
Issue Type
Fehler
SchwierigkeitGeschätzte Implementierungsschwierigkeit für neue Contributors, von 1 für sehr kleine Änderungen bis 5 für Expertenarbeit.
2
Geschätzte ZeitEin grober Zeitrahmen, um zu recherchieren, zu implementieren, zu testen und einen Pull Request vorzubereiten.
Unter 1 Stunde
AktivitätsstatusWie verfügbar das Issue gerade wirkt: frisch, aktiv, stale, blockiert oder wartet auf Maintainer-Input.
Frisch
KlarheitWie klar das Issue die erwartete Änderung, Akzeptanzkriterien und den nächsten Schritt erklärt.
Klar
Voraussetzungen
GitPython
EinsteigerfreundlichkeitEin Score von 1 bis 100, der schätzt, wie zugänglich dieses Issue für First-Time Contributors ist.
90