alibaba/GraphScope

Support wildcards when loading from files

Open

#2 936 ouverte le 27 juin 2023

Voir sur GitHub
 (14 commentaires) (2 réactions) (0 assignés)HTML (2 401 stars) (301 forks)batch import
component:gaecomponent:vineyardgood first issue

Description

For example:

graph.add_edges('/data/person/*.csv')

We support wildcards in oss and hdfs, (by fsspec) but not for local files.

Guide contributeur

Stack technique
python
Domaine
data
Type d'issue
feature
DifficultéDifficulté estimée pour un nouveau contributeur, de 1 pour un très petit changement à 5 pour un travail expert.
3
Temps estiméFourchette de temps approximative pour investiguer, implémenter, tester et préparer une pull request.
half day
Statut d'activitéDisponibilité apparente de l'issue : fraîche, active, ancienne, bloquée ou en attente d'un mainteneur.
stale
ClartéClarté avec laquelle l'issue explique le changement attendu, les critères d'acceptation et la prochaine étape.
clear
Prérequis
Pythonfile I/O concepts
Accessibilité débutantScore de 1 à 100 estimant l'accessibilité de cette issue pour un premier contributeur.
60
Direction de recherche
Investigate the existing wildcard support for OSS and HDFS via fsspec in the GraphScope codebase. Locate the local file loading function (likely in the graph module) and implement wildcard expansion using Python's glob module. Review the 14 comments for any proposed approaches or caveats.