[BUG] `up` pulls an image once per service when several services share it
I maintainer di solito rispondono entro 1 giorno
Valutazione
Questa issue non è ancora stata valutata.
Descrizione
Description
When several services use the same missing image, docker compose up sends one pull request
per service. docker compose pull pulls the image once (fixed for #8768).
With the containerd image store, every one of these pulls also unpacks the layers. On a stack of
21 services sharing one 5.7 GB image, up ran 21 parallel unpacks of the same layers on an
NVIDIA Jetson Thor. containerd logged about 17,600 (*service).Write failed ... ref moby/1/layer-sha256:... locked errors while the pulls waited on each other, and the progress
display stayed at 5.675 GB / 5.683 GB for several minutes while the load average was about 35.
Steps To Reproduce
compose.yaml:
services:
a:
image: alpine:3.20.3
command: ["sleep", "infinity"]
b:
image: alpine:3.20.3
command: ["sleep", "infinity"]
c:
image: alpine:3.20.3
command: ["sleep", "infinity"]
repro.sh (removes alpine:3.20.3 and counts the engine's pull events):
#!/usr/bin/env bash
set -euo pipefail
cd "$(dirname "$0")"
count_pulls() {
docker compose down --timeout 0 >/dev/null 2>&1
docker image rm --force alpine:3.20.3 >/dev/null 2>&1 || true
docker events --filter type=image --filter event=pull --format '{{.Action}} {{.Actor.ID}}' > events.log &
local events_pid=$!
sleep 1
docker compose "$@" >/dev/null 2>&1
sleep 2
kill "$events_pid"
echo "docker compose $*: $(wc -l < events.log) pull(s)"
}
count_pulls pull
count_pulls up --detach
docker compose down --timeout 0 >/dev/null 2>&1
rm -f events.log
Output:
docker compose pull: 1 pull(s)
docker compose up --detach: 3 pull(s)
Expected: up --detach pulls the image once, like pull.
Compose Version
Docker Compose version v5.6.1
Docker Environment
Client and server 29.9.2, Fedora Linux 45 (Workstation Edition), x86_64,
storage driver overlayfs with io.containerd.snapshotter.v1
Anything else?
No response
- Lingua principale
- Go
- Stelle
- 38.9k
- Fork
- 6k
- Merge medio
- 2g 22h
- PR unite (30g)
- 81
Preparare l'ambiente
- Include un Dockerfile o un file Docker Compose
- Ha un modello di pull request
- Leggi la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di docker/compose
-
[BUG] `docker compose port` prints `:0` (exit 0) for a port the image exposes but the service does not publishForse già presa @ndeloof l’ha presa 1 giorno fa. Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 62/100
docker/compose#14435 · 2 commenti ·
I maintainer di solito rispondono entro 1 giorno
-
[BUG] deploy.restart_policy without condition drops the restart policyForse di nuovo libera @akshat-lakhera l’ha presa 25 giorni fa e non c’è nessuna pull request aperta. Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 82/100
docker/compose#14383 · 3 commenti ·
I maintainer di solito rispondono entro 1 giorno
-
[BUG] up: an optional (required: false) service_healthy dependent is not started when a required dependent shares the failing waitForse già presa @ndeloof l’ha presa 2 giorni fa. Aperta
Difficoltà 4/5 3-5 giorni Idoneità per principianti 58/100
docker/compose#14507 · 2 commenti ·
I maintainer di solito rispondono entro 1 giorno
-
[BUG] Negative replica count in scale flags (docker compose scale / --scale) is accepted without validationForse già presa @arsalanyavari l’ha presa 8 giorni fa. Apertakind/bug status/approved
Difficoltà 2/5 1-3 ore Idoneità per principianti 30/100
I maintainer di solito rispondono entro 1 giorno
Tutte le issue di docker/compose
Issue simili
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 86/100
fluxcd/notification-controller#1441 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 76/100
OneBusAway/maglev#2145 ·
I maintainer di solito rispondono entro 2 giorni
-
priority/medium status/ready type/chore
Difficoltà 2/5 1-3 ore Idoneità per principianti 84/100
discobox-ai/discobox#1357 ·
I maintainer di solito rispondono entro 1 giorno
-
TestPseudoLocaleRemote fails now and then: it types the code before the laptop asks for itForse già presa @fzn0x l’ha presa oggi. Apertabug priority: low
Difficoltà 2/5 1-3 ore Idoneità per principianti 88/100
I maintainer di solito rispondono entro 1 giorno
-
edit_file diff rendering panics on invalid UTF-8 textForse già presa @TDnorthgarden l’ha presa oggi. Apertaarea/tui
Difficoltà 2/5 1-3 ore Idoneità per principianti 85/100
docker/docker-agent#4955 ·
I maintainer di solito rispondono entro 1 giorno