Proper way to batch queries?
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 5/5
- Tempo stimato
- Più di una settimana
- Idoneità per principianti
- 25/100
- Tipo di issue
- Funzionalità
- Chiarezza
- Da chiarire
- Stato di attività
- Ferma
- Stack tecnologico
- javascript, node.js, postgresql
Direzione di ricerca
Non sono identificati file sorgente, test o entry point. Inizia con l'esempio Promise.all fornito e con l'issue #1388 di node-postgres collegata, quindi stabilisci se è prevista una modifica concreta per l'elaborazione in batch. Per considerarlo completato, sarebbero necessari un ambito concordato e un modo specificato per convalidare le prestazioni del carico di lavoro UPDATE di grandi dimensioni segnalato.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
I have a large amount of UPDATE statements to make. The most efficient way I have found, however slow, is:
await Promise.all(largeBatchOfQueries.map(async (query) => {
const client = await pool.connect();
await client.query(query.sql, [
query.param1,
query.param2,
query.param3,
query.param4
])
await client.release();
}));
~160k UPDATEs takes ~2.5 minutes which is too slow for my situation. ~30 max connections in pool gives me the best time.
I saw there is discussion around the topic but not sure if I need a different approach or to add another library. Wondering if anyone has any insight, much appreciated.
https://github.com/brianc/node-postgres/issues/1388
- Lingua principale
- JavaScript
- Stelle
- 13.2k
- Fork
- 1.4k
- Merge medio
- 6g 15h
- PR unite (30g)
- 6
Guida per i contributori
Nessuna guida per i contributori indicizzata per questo repository
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di brianc/node-postgres
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
brianc/node-postgres#3770 ·
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
brianc/node-postgres#3716 · 1 commento ·
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
brianc/node-postgres#3631 · 1 commento ·
-
Difficoltà 1/5 1-3 ore Idoneità per principianti 62/100
brianc/node-postgres#2857 ·
-
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 68/100
brianc/node-postgres#2433 ·
Tutte le issue di brianc/node-postgres
Issue simili
-
Difficoltà 1/5 1-3 ore Idoneità per principianti 78/100
Mintplex-Labs/anything-llm#6490 ·
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 86/100
-
[quality] workflow-scripts guard reads test:unit:coverage as skipping the unit suite, blocking #632 Apertaagent/quality hive/hosted-available-lke648397-260827-5n31 quality testing
Difficoltà 2/5 1-3 ore Idoneità per principianti 86/100
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
-
area-clientside-dartpad
Difficoltà 2/5 1-3 ore Idoneità per principianti 62/100