使用spark跑会出现内存溢出的情况，不知道大佬们遇到过没
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 4/5
- Thời gian dự kiến
- 3-5 ngày
- Mức phù hợp với người mới
- 25/100
- Loại issue
- Lỗi
- Độ rõ ràng
- Cần làm rõ
- Mức độ hoạt động
- Đình trệ
- Công nghệ
- spark
- Lĩnh vực
- data-engineering, distributed-systems
Hướng nghiên cứu
Không có tệp, bài kiểm thử hoặc điểm vào nào được nêu. Hãy bắt đầu bằng cách tái hiện workload Spark và kiểm tra ExecutorLostFailure được báo cáo cùng thông báo giới hạn bộ nhớ của YARN, bao gồm cả thiết lập executor memory-overhead. Công việc được xem là hoàn tất khi đã xác định được nguyên nhân và ghi lại hoặc xác minh một cách giải quyết cụ thể cho dự án.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
ExecutorLostFailure (executor 13 exited caused by one of the running tasks) Reason: Container killed by YARN for exceeding memory limits. 20.0 GB of 20 GB physical memory used. Consider boosting spark.yarn.executor.memoryOverhead.
- Ngôn ngữ chính
- Java
- Star
- 271
- Fork
- 88
- Chỉ số merge pull request
- Không có pull request nào được merge trong 30 ngày
Chuẩn bị môi trường
- Không có Dockerfile hay tệp Docker Compose
- Không có mẫu pull request
- Đọc hướng dẫn đóng góp
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của didi/ES-Fastloader
-
xpack权限问题Đang mở
Độ khó 4/5 3-5 ngày Mức phù hợp với người mới 20/100
didi/ES-Fastloader#41 ·
-
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 18/100
didi/ES-Fastloader#28 · 1 bình luận ·
-
Độ khó 1/5 Dưới một giờ Mức phù hợp với người mới 45/100
didi/ES-Fastloader#19 ·
-
Độ khó 1/5 1-3 giờ Mức phù hợp với người mới 35/100
didi/ES-Fastloader#18 ·
-
Độ khó 5/5 Hơn một tuần Mức phù hợp với người mới 15/100
didi/ES-Fastloader#17 · 3 bình luận ·
Tất cả issue của didi/ES-Fastloader
Issue tương tự
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 72/100
federicoiosue/Omni-Notes#1032 ·
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
unitycatalog/unitycatalog#2025 ·
Maintainer thường phản hồi trong vòng 4 ngày
-
Độ khó 1/5 1-3 giờ Mức phù hợp với người mới 78/100
krizaka/krizaka-notifications#22 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
CommandDispatcher.register returns a node that is not in the tree when the literal is already registeredCó thể đã có người làm @auraseb đã nhận hôm nay. Đang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 83/100
-
ToolCallbackProvider AutoConfiguration does not preserve tool orderCó thể đã có người làm Có pull request liên kết đang mở hoặc đã được merge. Đang mởstatus: waiting-for-triage
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 79/100
spring-projects/spring-ai#7206 ·
Maintainer thường phản hồi trong vòng 2 ngày