Memory Usage Increase in Log4j2 2.24.3 with Async Logging Due to RingBufferLogEvent

Aperta
  • Qualcosa non va?
#3,569 11 commenti 1 reazione 0 assegnatari Vedi su GitHub

I maintainer di solito rispondono entro 1 giorno

Nessuno ha ancora preso questa issue.

Valutazione

Difficoltà
4/5
Tempo stimato
3-5 giorni
Idoneità per principianti
35/100
Tipo di issue
Bug
Chiarezza
Da chiarire
Stato di attività
Ferma
Stack tecnologico
java
Ambito
observability-sre

Direzione di ricerca

Inizia con le modifiche alla gestione della memoria di RingBufferLogEvent e RingBuffer introdotte tra Log4j2 2.23.1 e 2.24.3, usando la configurazione di logging asincrono fornita come contesto di riproduzione. Confronta il comportamento dell’heap tra entrambe le versioni e determina se la crescita segnalata è prevista o se si tratta di una regressione; il lavoro è completo quando la causa e un risultato riproducibile sono documentati.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Descrizione

async performance question waiting-for-maintainer

Description

I am using Log4j2 in my project and recently upgraded from version 2.23.1 to 2.24.3. The application employs an asynchronous logging strategy with Disruptor version 3.4.3. Below is the relevant configuration:

  • log4j2.contextSelector=org.apache.logging.log4j.core.async.AsyncLoggerContextSelector
  • log4j2.asyncQueueFullPolicy=org.apache.logging.log4j.core.async.DiscardingAsyncQueueFullPolicy
  • log4j2.discardThreshold=ERROR
  • log4j2.asyncLoggerWaitStrategy=Yield
  • log4j2.asyncLoggerRingBufferSize=1048576

The logging frequency in my application is relatively low, averaging about 10 log entries per second. When using version 2.23.1, memory usage remained stable based on monitoring data . However, after upgrading to 2.24.3, I observed a gradual increase in memory usage over time, which eventually stabilizes at a fixed threshold.
Figure 1

This behavior differs significantly from what I experienced with 2.23.1. Through heap dump analysis at different time intervals, I confirmed that the memory growth is primarily associated with RingBufferLogEvent objects within Log4j2’s RingBuffer implementation, with the RingBuffer’s memory footprint consistently increasing over time.

Image

Image

Image

I noticed that the 2.24.3 release includes several changes related to memory management. Could any of these changes, particularly those affecting the RingBuffer or RingBufferLogEvent, explain the behavior I am observing?

If additional details are needed, please let me know, and I’d be happy to provide them.

Environment

  • Log4j2 Version: 2.24.3 (upgraded from 2.23.1)
  • Disruptor Version: 3.4.3
  • JVM: Zing24.08.101.0+1 (build 21.0.4.0.101+1-LTS)
  • Logging Frequency: ~10 logs/second
Lingua principale
Java
Stelle
3.6k
Fork
1.8k
Merge medio
5g 6h
PR unite (30g)
24

Preparare l'ambiente

  • Nessun Dockerfile né file Docker Compose
  • Ha un modello di pull request
  • Nessuna guida per i contributori

Come iniziare

  1. Leggi tutta la issue e poi la guida ai contributi del progetto.
  2. Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
  3. Fai un fork del repository e lavora su un branch.
  4. Apri una pull request che faccia riferimento al numero della issue.

Altre issue di apache/logging-log4j2

Tutte le issue di apache/logging-log4j2

Issue simili

Altre issue su Java

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.