Bogdanp/django_dramatiq

InterfaceError: connection already closed

Aperta

#106 aperta il 7 giu 2021

Vedi su GitHubGuida contributor
 (18 commenti) (0 reazioni) (0 assegnatari)Python (86 fork)github user discovery
help wanted

Metriche repository

Star
 (384 stelle)
Metriche merge PR
 (Nessuna PR mergiata in 30 g)

Descrizione

I'm pushing 500+ tasks per minute through Dramatiq as part of a Django app and occasionally (once every 1-2 days) I suddenly get hundreds instances of this error from the workers and the only way to fix it is to restart the worker process.

Sentry reports that it's triggered in both before_process_message() and after_process_message() when they both call Task.tasks.create_or_update_from_message().

I have CONN_MAX_AGE set to 0 and database connections are pooled via PgBouncer.

Please let me know if I'm missing any other information.

Guida contributor

Direzione di ricerca
Indaga il ciclo di vita delle connessioni nei worker Dramatiq e assicurati che le connessioni al database siano gestite correttamente in ambiente multithread. Controlla le impostazioni di timeout idle di PgBouncer.
Tech stack
pythondjangopostgresql
Dominio
backend
Tipo issue
Bug
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
1-3 ore
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
PythonDjangoPostgreSQL
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
55