openPMD/openPMD-api

Filesystem: Consider mpifileutils?

Aperta

#687 aperta il 18 feb 2020

Vedi su GitHubGuida contributor
 (0 commenti) (0 reazioni) (0 assegnatari)C++ (57 fork)auto 404
MPIfeature requestgood first issuehelp wantedinternalrefactoring

Metriche repository

Star
 (160 stelle)
Metriche merge PR
 (Metriche PR in attesa)

Descrizione

We currently ship our own set of filesystem functions to create / handle dirs and files on the OS we support.

Much of it could be simplified with C++ filesystem support, which is still not production ready in tooling and broad support.

On top of that, for MPI-parallel operations such as an mkdir -p for a series, we do implement safe but potentially meta-data-server "heavy" operations. We could explore if functionality from mpifileutils can be included/used if this becomes problematic at some point.

Guida contributor

Direzione di ricerca
Investiga il codice del filesystem esistente in openPMD api e confrontalo con le funzionalità di mpifileutils. Determina se l'integrazione di mpifileutils potrebbe risolvere problemi di prestazioni o complessità per operazioni MPI parallele come mkdir p. Riassumi potenziali benefici, rischi e sforzo di implementazione.
Tech stack
cpp
Dominio
backendapi
Tipo issue
Ricerca
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Mezza giornata
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Abbastanza chiara
Prerequisiti
C++MPIGit
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
20