Not able to prevent additional mmap-s beside reserved memory
Les mainteneurs répondent en général sous 1 jour
Personne n'a encore pris cette issue.
Évaluation
- Difficulté
- 4/5
- Temps estimé
- 3-5 jours
- Accessibilité débutants
- 28/100
- Type d'issue
- Bug
- Clarté
- À clarifier
- Activité
- À l'abandon
- Stack technique
- c
- Domaine
- operating-systems, performance
Piste de recherche
Commencez par reproduire le problème avec les paramètres MIMALLOC_* indiqués, disallow_os_alloc=1 et la journalisation de mmap/munmap décrite dans le rapport. Comparez les mappings d’initialisation de 64 KiB aux mappings de huge pages réservés et déterminez si le comportement observé est attendu ou s’il indique un bug. Le travail est terminé lorsque le comportement de mmap et le résultat ENOMEM précoce sont expliqués, avec un test de régression ciblé ou une limitation clairement documentée, le cas échéant.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Description
I'm using mimalloc as drop-in malloc replacement. For my usecase I want to preallocate big area of 2M huge-pages and make mimalloc use that area for all allocations unless it's fully used in which case I want to fallback to additional memory (regular mmap).
The preallocated area should be enough for 99.9% of runtime and only in extreme cases (e.g. bugs and leaks) I expect additional mmaps.
I'm setting these environment options:
MIMALLOC_RESERVE_HUGE_OS_PAGES=14
MIMALLOC_PURGE_DELAY=-1
MIMALLOC_VERBOSE=1
MIMALLOC_SHOW_STATS=1
MIMALLOC_SHOW_ERRORS=1
I've also added logging around mmap/munmap calls. I expected not to see any additional calls besides initial 14 calls to mmap with 1 GiB size. However I still see numerous mmap calls with size 64kb at init time.
When I tried to setting disallow_os_alloc=1, I've got ENOMEM early in application init, definitely before 14GB were exhausted. I looks like mimalloc tries to allocate from OS even if there is plenty of free memory in preallocated area.
Am I misunderstanding something?
There's similar recent question https://github.com/microsoft/mimalloc/issues/1218, but AFAIU it only applies to arenas larger than 16GB while in my case I have 14GB.
- Langage dominant
- C
- Étoiles
- 13.6k
- Forks
- 1.2k
- Merge moyen
- 18 h 12 min
- PR mergées (30 j)
- 20
Préparer son environnement
Ce projet ne fournit ni conteneur de développement, ni Dockerfile, ni guide de contribution : l'installation est à votre charge. Commencez par son README, et consultez notre guide de la première contribution pour les étapes générales.
Par où commencer
- Lisez l'issue en entier, puis le guide de contribution du projet.
- Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
- Forkez le dépôt et travaillez sur une branche.
- Ouvrez une pull request qui référence le numéro de l'issue.
Autres issues de microsoft/mimalloc
-
Difficulté 2/5 1-3 heures Accessibilité débutants 72/100
Les mainteneurs répondent en général sous 1 jour
-
Building mimalloc with `-Wundef` compiler flag logs many warnings on undefined macrosPeut-être pris @vstinner l’a pris il y a 1 jour. Ouverte
Difficulté 2/5 1-3 heures Accessibilité débutants 64/100
microsoft/mimalloc#1506 · 5 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
stale
Difficulté 2/5 1-3 heures Accessibilité débutants 74/100
microsoft/mimalloc#1113 · 1 commentaire ·
Les mainteneurs répondent en général sous 1 jour
-
Difficulté 2/5 1-3 heures Accessibilité débutants 65/100
microsoft/mimalloc#886 · 4 commentaires · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
Difficulté 2/5 1-3 heures Accessibilité débutants 64/100
microsoft/mimalloc#368 · 1 commentaire ·
Les mainteneurs répondent en général sous 1 jour
Toutes les issues de microsoft/mimalloc
Issues similaires
-
needs triage
Difficulté 2/5 1-3 heures Accessibilité débutants 70/100
389ds/389-ds-base#8157 ·
Les mainteneurs répondent en général sous 2 jours
-
Difficulté 2/5 1-3 heures Accessibilité débutants 67/100
coolsnowwolf/lede#14305 ·
Les mainteneurs répondent en général sous 1 jour
-
bug
Difficulté 2/5 1-3 heures Accessibilité débutants 84/100
Les mainteneurs répondent en général sous 1 jour
-
Difficulté 2/5 1-3 heures Accessibilité débutants 82/100
Les mainteneurs répondent en général sous 1 jour
-
Needs-Triage
Difficulté 2/5 1-3 heures Accessibilité débutants 66/100
Les mainteneurs répondent en général sous 2 jours