Raise the minimum fsspec to 2024.5.0 in 2.4
Les mainteneurs répondent en général sous 6 jours
Personne n'a encore pris cette issue.
Évaluation
- Difficulté
- 2/5
- Temps estimé
- 1-3 heures
- Accessibilité débutants
- 68/100
- Type d'issue
- Refactorisation
- Clarté
- Clairement spécifiée
- Activité
- Active
- Stack technique
- python
- Domaine
- build-system, testing
Piste de recherche
Commencez dans pyproject.toml : fixez les versions minimales de fsspec, s3fs et gcsfs à 2024.5.0, et vérifiez si adlfs a besoin d’une version minimale correspondante. Lisez #1686 pour la normalisation des chemins locaux qui permet de supprimer les branches old-fsspec, puis simplifiez les cas antérieurs à 2024.5.0 dans test_path_confinement.py. Terminé lorsque les nouvelles versions minimales sont déclarées, que le job CI de dépendances minimales passe et que les tests de chemins ne se ramifient plus selon l’ancien comportement de fsspec.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Description
Proposal
Raise the minimum fsspec from 2023.1.0 to 2024.5.0 in 2.4, and the storage extras with it (s3fs, gcsfs), which pin fsspec to their own version.
Why
Older fsspec resolves local paths differently from current releases, and the file-store code has to handle both:
- Before 2024.5.0,
LocalFileSystem._strip_protocol(".")keeps a trailing/.. A file store withlocation""or"."rejected every path because of it, which #1686 fixes by normalizing both sides of the comparison. - In fsspec 2023,
file:andlocal:without//are not read as a protocol, so the same path string names a different file than on current fsspec. The test intest_path_confinement.pyhad to be rewritten in #1686 to hold on both.
The minimum-dependency CI job catches these differences, but only after the fact. Every change to path handling has to be reasoned through on two fsspec behaviors. Releases from 2024.5.0 on behave the same as current fsspec in both respects.
Cost
- Users on
s3fsorgcsfsolder than 2024.5.0 upgrade them along with fsspec.s3fsin turn pinsaiobotocore, which pinsbotocore, so environments that hold an old boto stack would need to move it. adlfsdoes not pin fsspec exactly and is not affected beyond the fsspec floor itself.
Scope
- 2.4 only. 2.3.x keeps
fsspec>=2023.1.0: a patch release should not force dependency upgrades, and #1686 keeps the 2.3 line working on old fsspec. pyproject.toml:fsspec>=2024.5.0,s3fs>=2024.5.0,gcsfs>=2024.5.0; check whetheradlfsneeds a matching floor.- The minimum-dependency CI job picks up the new floor from
pyproject.toml. - Once the floor is raised, the old-fsspec branches of the path tests can be simplified.
- Langage dominant
- Python
- Étoiles
- 198
- Forks
- 103
- Merge moyen
- 6 j 1 h
- PR mergées (30 j)
- 10
Préparer son environnement
- Fournit un Dockerfile ou un fichier Docker Compose
- Aucun modèle de pull request
- Lire le guide de contribution
Par où commencer
- Lisez l'issue en entier, puis le guide de contribution du projet.
- Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
- Forkez le dépôt et travaillez sur une branche.
- Ouvrez une pull request qui référence le numéro de l'issue.
Autres issues de datajoint/datajoint-python
-
bug
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
datajoint/datajoint-python#1703 ·
Les mainteneurs répondent en général sous 6 jours
-
bug
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
datajoint/datajoint-python#1702 ·
Les mainteneurs répondent en général sous 6 jours
-
bug
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
datajoint/datajoint-python#1701 ·
Les mainteneurs répondent en général sous 6 jours
-
bug
Difficulté 2/5 1-3 heures Accessibilité débutants 74/100
datajoint/datajoint-python#1691 ·
Les mainteneurs répondent en général sous 6 jours
-
bool() ignores dj.TopOuvertebug
Difficulté 2/5 1-3 heures Accessibilité débutants 80/100
datajoint/datajoint-python#1668 ·
Les mainteneurs répondent en général sous 6 jours
Toutes les issues de datajoint/datajoint-python
Issues similaires
-
cognition
Difficulté 2/5 1-3 heures Accessibilité débutants 82/100
Les mainteneurs répondent en général sous 1 jour
-
[Suggestion]: Geonode MCP ServerOuverte
Difficulté 1/5 Moins d'une heure Accessibilité débutants 78/100
collabnix/awesome-mcp-lists#433 ·
Les mainteneurs répondent en général sous 4 jours
-
CrossEntropyFilter raises on zero probabilities and single-class resultsPeut-être pris @NopeCharon l’a pris aujourd’hui. Ouverte
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
Les mainteneurs répondent en général sous 1 jour
-
Difficulté 2/5 1-3 heures Accessibilité débutants 78/100
Archmonger/ServeStatic#129 ·
-
Difficulté 2/5 1-3 heures Accessibilité débutants 76/100
Les mainteneurs répondent en général sous 2 jours