使用spark跑会出现内存溢出的情况,不知道大佬们遇到过没
还没有人认领这个 Issue。
评估
- 难度
- 4/5
- 预计耗时
- 3-5 天
- 新手友好度
- 25/100
- Issue 类型
- 缺陷
- 描述清晰度
- 需要澄清
- 活跃度
- 停滞
- 技术栈
- spark
调研方向
未指定文件、测试或入口点。首先重现 Spark 工作负载,并检查报告的 ExecutorLostFailure 和 YARN 内存限制消息,包括 executor memory-overhead 设置。确定原因并记录或验证项目特定的解决方案后,即可视为完成。
由索引模型根据 Issue 内容生成。
描述
ExecutorLostFailure (executor 13 exited caused by one of the running tasks) Reason: Container killed by YARN for exceeding memory limits. 20.0 GB of 20 GB physical memory used. Consider boosting spark.yarn.executor.memoryOverhead.
- 主要语言
- Java
- 星标
- 271
- 派生
- 88
- PR 合并指标
- 30 天内没有已合并 PR
环境准备
- 没有 Dockerfile 或 Docker Compose 文件
- 没有 Pull Request 模板
- 阅读贡献指南
从这里开始
- 先读完整个 Issue,再读项目的贡献指南。
- 在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
- Fork 仓库,在一个分支上完成修改。
- 提交 Pull Request,并在描述里引用这个 Issue 编号。
didi/ES-Fastloader 的其他 Issue
-
xpack权限问题未关闭
难度 4/5 3-5 天 新手友好度 20/100
didi/ES-Fastloader#41 ·
-
难度 5/5 一周以上 新手友好度 18/100
didi/ES-Fastloader#28 · 1 条评论 ·
-
难度 1/5 1 小时以内 新手友好度 45/100
didi/ES-Fastloader#19 ·
-
难度 1/5 1-3 小时 新手友好度 35/100
didi/ES-Fastloader#18 ·
-
难度 5/5 一周以上 新手友好度 15/100
didi/ES-Fastloader#17 · 3 条评论 ·
查看 didi/ES-Fastloader 的全部 Issue
相似的 Issue
-
[BUG] jackson3 JacksonJsonpMapper(ObjectMapper) fails to deserialize `_source` with "Trailing token" error可能已有人在做 @junyeokk 今天认领。 未关闭bug untriaged
难度 2/5 1-3 小时 新手友好度 82/100
opensearch-project/opensearch-java#2236 ·
维护者通常 1 天内回复
-
难度 2/5 1-3 小时 新手友好度 67/100
-
难度 2/5 1-3 小时 新手友好度 62/100
open-learning-exchange/myplanet#18392 ·
维护者通常 2 天内回复
-
难度 2/5 1-3 小时 新手友好度 76/100
linagora/twake-calendar-side-service#1218 · 1 条评论 ·
维护者通常 1 天内回复
-
[Bug] [Go] Ack returns nil when the server answers with a non-OK status可能已有人在做 @leizhiyuan 今天认领。 未关闭
难度 2/5 1-3 小时 新手友好度 84/100
apache/rocketmq-clients#1465 ·
维护者通常 2 天内回复