BiocParallel does not keep logs during job failure
@nturaga ci sta già lavorando.
Dal 6/9/2019.
Valutazione
Questa issue non è ancora stata valutata.
Descrizione
Hello,
I am currently running a parallel jobs (with bplapply) on an LSF cluster using BatchToolsParam and I found an issue where there are no logs produced in runs that have a few jobs failing.
Here is the error log from the failed run:
Quitting from lines 86-88 (demultiplex.Rmd)
Error in .reduceResultsList(ids, fun, ..., missing.val = missing.val, :
All jobs must be have been successfully computed
Calls: <Anonymous> ... bplapply -> bplapply -> <Anonymous> -> .reduceResultsList
Execution halted
When I tried to check the logs from the batchtools jobs, I noticed that there was no logs being produced at all which made figuring out the reason for the job failures difficult. I eventually managed to capture the logs manually by copying the temporary registry directory before the bplapply job finishes, where I found that the cause of the job failure is due to a missing executable in a few of the cluster nodes, resulting in the job exiting before R was even executed.
It would be really useful to actually be able to get the logs from the batchtools jobs even if some of the jobs failed to execute R, especially in LSF cluster as the logs contain the job execution information.
- Lingua principale
- R
- Stelle
- 69
- Fork
- 32
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Guida per i contributori
Nessuna guida per i contributori indicizzata per questo repository
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di Bioconductor/BiocParallel
-
Difficoltà 3/5 1-2 giorni Idoneità per principianti 65/100
Bioconductor/BiocParallel#286 · 1 commento ·
-
Difficoltà 3/5 1-2 giorni Idoneità per principianti 50/100
Bioconductor/BiocParallel#285 ·
-
Bioconductor/BiocParallel#284 · 2 commenti · 1 assegnatario ·
-
Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100
Bioconductor/BiocParallel#283 · 2 commenti ·
-
DoparParam: Captured stdout is relayed to stdout for some foreach adapters and stderr for others Aperta
Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100
Bioconductor/BiocParallel#277 ·
Tutte le issue di Bioconductor/BiocParallel
Issue simili
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
robjhyndman/forecast#1220 ·
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 65/100
JamesHWade/deputy#192 ·
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
-
bug triage_needed
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
pharmaverse/rtables#1123 · 1 commento · 1 reazione ·