使用spark跑会出现内存溢出的情况，不知道大佬们遇到过没
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 25/100
- Tipo di issue
- Bug
- Chiarezza
- Da chiarire
- Stato di attività
- Ferma
- Stack tecnologico
- spark
- Ambito
- data-engineering, distributed-systems
Direzione di ricerca
Non viene indicato alcun file, test o punto di ingresso. Inizia riproducendo il carico di lavoro Spark ed esaminando l’ExecutorLostFailure segnalato e il messaggio relativo al limite di memoria di YARN, inclusa l’impostazione executor memory-overhead. Il lavoro è completato quando la causa è stata identificata e una risoluzione specifica del progetto è stata documentata o verificata.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
ExecutorLostFailure (executor 13 exited caused by one of the running tasks) Reason: Container killed by YARN for exceeding memory limits. 20.0 GB of 20 GB physical memory used. Consider boosting spark.yarn.executor.memoryOverhead.
- Lingua principale
- Java
- Stelle
- 272
- Fork
- 88
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Preparare l'ambiente
- Nessun Dockerfile né file Docker Compose
- Nessun modello di pull request
- Leggi la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di didi/ES-Fastloader
-
xpack权限问题Aperta
Difficoltà 4/5 3-5 giorni Idoneità per principianti 20/100
didi/ES-Fastloader#41 ·
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 18/100
didi/ES-Fastloader#28 · 1 commento ·
-
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 45/100
didi/ES-Fastloader#19 ·
-
Difficoltà 1/5 1-3 ore Idoneità per principianti 35/100
didi/ES-Fastloader#18 ·
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 15/100
didi/ES-Fastloader#17 · 3 commenti ·
Tutte le issue di didi/ES-Fastloader
Issue simili
-
[Bug] AI unread message badge counts a batch of new bubbles as one messageForse già presa Una pull request collegata a questa issue è aperta o già unita. Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 74/100
apache/rocketmq-dashboard#5784 ·
I maintainer di solito rispondono entro 3 giorni
-
[i18n] 安装实例完成后的成功提示未正确本地化Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 62/100
PCL-Community/PCL-CE#3658 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 66/100
apache/skywalking#14127 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 82/100
I maintainer di solito rispondono entro 1 giorno
-
Team/Identity Server Core Type/Improvement U2
Difficoltà 2/5 1-3 ore Idoneità per principianti 62/100
wso2/product-is#28553 ·
I maintainer di solito rispondono entro 1 giorno