llvm/llvm-project

orc::InProcessMemoryMapper makes too many memory mappings

Open

#63.236 aberto em 10 de jun. de 2023

Ver no GitHub
 (16 comments) (1 reaction) (0 assignees)C++ (10.782 forks)batch import
good first issuejulialangorcjit

Métricas do repositório

Stars
 (26.378 stars)
Métricas de merge de PR
 (Mesclagem média 1d 2h) (1.000 fundiu PRs em 30d)

Description

First seen in https://github.com/JuliaLang/julia/pull/49745, but to summarize, InProcessMemoryMapper calls mprotect many many times on mmaped memory, so many times that for a non trivial workload we go past /proc/sys/vm/max_map_count leading to a ENOMEM error.

I haven't created a non julia reproducer but it should be possible.

Guia do colaborador

Direção de pesquisa
Profile as chamadas mprotect durante uma carga de trabalho e identifique regiões de memória contíguas que podem ser mescladas para reduzir o número de chamadas.
Pilha de tecnologia
cpp
Domain
operating systemsperformance
Tipo Issue
Bug
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
3
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
3-5 dias
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Principalmente claro
Prerequisites
C++Memory Management
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
40