Allow to split EKO computation for a dataset

Ouverte
#201 1 commentaire 0 réactions 0 personnes assignées Voir sur GitHub

Personne n'a encore pris cette issue.

Évaluation

Difficulté
4/5
Temps estimé
3-5 jours
Accessibilité débutants
35/100
Type d'issue
Fonctionnalité
Clarté
Plutôt claire
Activité
À l'abandon
Stack technique
python
Domaine
backend

Piste de recherche

Read the issue's linked EKO pull request #296 and EKO issue #399 first to understand the existing split-computation support. Then trace Pineko's path for loading an operator card and eko.tar and handling an existing result. Done means a run can continue unfinished EKO computation from that archive; the issue names no Pineko files or tests.

Rédigé par le modèle d'indexation à partir du texte de l'issue.

Description

enhancement

While the computation of a single 4D EKO is reasonably fast, some datasets have many scales which makes them slow again. This is becoming a bottle neck on clusters, where a time limit of 24h seems to have risen.

Starting from https://github.com/NNPDF/eko/pull/296 EKO provides some support to split the computation into several pieces. Note https://github.com/NNPDF/eko/issues/399

@scarlehoff is wishing for

Pineko-wise it would be enough being able to continue an eko where we left it
So I get an operator card and an eko.tar file and instead of refusing to run or rerunning it looks inside and continues

this should be doable

Langage dominant
Python
Étoiles
2
Forks
0
Merge moyen
10 j 34 min
PR mergées (30 j)
3

Préparer son environnement

Par où commencer

  1. Lisez l'issue en entier, puis le guide de contribution du projet.
  2. Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
  3. Forkez le dépôt et travaillez sur une branche.
  4. Ouvrez une pull request qui référence le numéro de l'issue.

Autres issues de NNPDF/pineko

Toutes les issues de NNPDF/pineko

Issues similaires

Plus d'issues Python

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.