Pourquoi les images de conteneurs Docker sont-elles si grandes?

J'ai fait une image simple via Dockerfile de Fedora (initialement 320 Mo).

Ajout de Nano (ce petit éditeur de 1 Mo de taille) et la taille de l'image est passée à 530 Mo. J'ai ajouté Git en plus de cela (30 Mo), puis ma taille d'image fusées célestes à 830 Mo.

N'est-ce pas insensé?

J'ai essayé d'exporter et d'importer un conteneur pour supprimer l'historique / les images intermédiaires. Cet effort a permis d'économiser jusqu'à 25 Mo, maintenant ma taille d'image est de 804 Mo. J'ai également essayé d'exécuter de nombreuses commandes sur une RUN, mais j'obtiens toujours le même 830 Mo initial.

Je doute que cela vaille la peine d'utiliser Docker. Je veux dire, j'ai à peine installé quoi que ce soit et je frappe 1 Go de plus. Si je devais ajouter des choses sérieuses comme une base de données et ainsi de suite, je pourrais manquer d'espace disque.

Quelqu'un souffre de la taille ridicule des images? Comment gères-tu cela?

À moins que mon Dockerfile soit horriblement incorrect?

FROM fedora:latest
MAINTAINER Me NotYou <[email protected]>
RUN yum -y install nano
RUN yum -y install git

mais il est difficile d'imaginer ce qui pourrait mal tourner ici.

Comme @rexposadas l'a dit, les images incluent toutes les couches et chaque couche comprend toutes les dépendances pour ce que vous avez installé. Il est également important de noter que les images de base (comme fedora:latestont tendance à être très simples. Vous pourriez être surpris par le nombre de dépendances de votre logiciel installé.

J'ai pu réduire considérablement votre installation en ajoutant yum -y clean allà chaque ligne:

FROM fedora:latest
RUN yum -y install nano && yum -y clean all
RUN yum -y install git && yum -y clean all

Il est important de le faire pour chaque RUN, avant que la couche ne soit validée, sinon les suppressions ne suppriment pas réellement les données. Autrement dit, dans un système de fichiers union / copie sur écriture, le nettoyage à la fin ne réduit pas vraiment l'utilisation du système de fichiers car les données réelles sont déjà validées dans les couches inférieures. Pour contourner ce problème, vous devez nettoyer chaque couche.

$ docker history bf5260c6651d
IMAGE               CREATED             CREATED BY                                      SIZE
bf5260c6651d        4 days ago          /bin/sh -c yum -y install git; yum -y clean a   260.7 MB
172743bd5d60        4 days ago          /bin/sh -c yum -y install nano; yum -y clean    12.39 MB
3f2fed40e4b0        2 weeks ago         /bin/sh -c #(nop) ADD file:cee1a4fcfcd00d18da   372.7 MB
fd241224e9cf        2 weeks ago         /bin/sh -c #(nop) MAINTAINER Lokesh Mandvekar   0 B
511136ea3c5a        12 months ago                                                       0 B

Les images Docker ne sont pas volumineuses, vous créez simplement de grandes images.

L' scratchimage est 0B et vous pouvez l'utiliser pour empaqueter votre code si vous pouvez compiler votre code dans un binaire statique. Par exemple, vous pouvez compiler votre programme Go et l' empaqueterscratch pour créer une image entièrement utilisable de moins de 5 Mo.

La clé est de ne pas utiliser les images officielles de Docker, elles sont trop grandes. Scratch n'est pas non plus très pratique, je vous recommande donc d'utiliser Alpine Linux comme image de base. Il fait environ 5 Mo, puis n'ajoutez que ce qui est requis pour votre application. Cet article sur Microcontainers vous montre comment créer de très petites images basées sur Alpine.

MISE À JOUR: les images officielles de Docker sont basées sur l'alpin maintenant, elles sont donc bonnes à utiliser maintenant.

Voici d'autres choses que vous pouvez faire :

• Évitez les RUNcommandes multiples lorsque vous le pouvez. Mettez autant que possible dans une seule RUNcommande (en utilisant &&)
• nettoyer les outils inutiles comme wget ou git (dont vous n'avez besoin que pour télécharger ou créer des éléments, mais pas pour exécuter votre processus)

Avec ces deux ET les recommandations de @Andy et @michau, j'ai pu redimensionner mon image nodejs de 1,062 Go à 542 Mo.

Edit: Une autre chose importante: "Il m'a fallu un certain temps pour vraiment comprendre que chaque commande Dockerfile crée un nouveau conteneur avec les deltas. [...] Peu importe si vous rm -rf les fichiers dans une commande ultérieure; ils continuent d'exister dans un conteneur de couche intermédiaire. " Alors maintenant , je réussi à mettre apt-get install, wget, npm install(avec dépendances git) et apt-get removeen une seule RUNcommande, maintenant mon image a seulement 438 Mo.

Modifier 29/06/17

Avec Docker v17.06, il y a de nouvelles fonctionnalités pour Dockerfiles: vous pouvez avoir plusieurs FROMinstructions dans un Dockerfile et seuls les éléments du dernier FROMseront dans votre image Docker finale. Ceci est utile pour réduire la taille de l'image, par exemple:

FROM nodejs as builder
WORKDIR /var/my-project
RUN apt-get install ruby python git openssh gcc && \
    git clone my-project . && \
    npm install

FROM nodejs
COPY --from=builder /var/my-project /var/my-project

Cela donnera une image ayant uniquement l'image de base nodejs plus le contenu de / var / my-project des premières étapes - mais sans ruby, python, git, openssh et gcc!

Oui, ces tailles sont ridicules, et je ne sais vraiment pas pourquoi si peu de gens le remarquent.

J'ai créé une image Ubuntu qui est en fait minimale (contrairement à d'autres images dites "minimales"). Il s'appelle textlab/ubuntu-essentialet dispose de 60 Mo.

FROM textlab/ubuntu-essential
RUN apt-get update && apt-get -y install nano

L'image ci-dessus fait 82 Mo après l'installation de nano.

FROM textlab/ubuntu-essential
RUN apt-get update && apt-get -y install nano git

Git a beaucoup plus de prérequis, donc l'image s'agrandit, environ 192 Mo. C'est encore moins que la taille initiale de la plupart des images.

Vous pouvez également consulter le script que j'ai écrit pour créer l'image minimale d'Ubuntu pour Docker . Vous pouvez peut-être l'adapter à Fedora, mais je ne sais pas combien vous pourrez désinstaller.

Ce qui suit m'a beaucoup aidé:

Après avoir supprimé les paquets inutilisés (par exemple redis 1200 mb libérés) à l'intérieur de mon conteneur, j'ai fait ce qui suit:

1. exportation du menu fixe [ID conteneur] -o nom_contenu.tar
2. docker import -m "message de validation ici" contientername.tar image: tag

Les couches s'aplatissent. La taille de la nouvelle image sera plus petite car j'ai supprimé les packages du conteneur comme indiqué ci-dessus.

Cela a pris beaucoup de temps pour comprendre cela et c'est pourquoi j'ai ajouté mon commentaire.

Pour une meilleure pratique, vous devez exécuter une seule commande RUN, car chaque instruction RUN du Dockerfile écrit une nouvelle couche dans l'image et chaque couche nécessite de l'espace supplémentaire sur le disque. Afin de réduire au minimum le nombre de couches, toute manipulation de fichier telle que l'installation, le déplacement, l'extraction, la suppression, etc., devrait idéalement être effectuée sous une seule instruction RUN.

FROM fedora:latest
RUN yum -y install nano git && yum -y clean all

Docker Squash est une très bonne solution à cela. vous pouvez $packagemanager cleandans la dernière étape au lieu de dans chaque ligne, puis exécutez simplement un docker squash pour vous débarrasser de toutes les couches.

https://github.com/jwilder/docker-squash

Oui, le système de couches est assez surprenant. Si vous avez une image de base et que vous l'incrémentez en procédant comme suit:

# Test
#
# VERSION       1

# use the centos base image provided by dotCloud
FROM centos7/wildfly
MAINTAINER JohnDo 

# Build it with: docker build -t "centos7/test" test/

# Change user into root
USER root

# Extract weblogic
RUN rm -rf /tmp/* \
    && rm -rf /wildfly/* 

L'image a exactement la même taille. Cela signifie essentiellement que vous devez réussir à mettre dans vos étapes RUN beaucoup de magie d'extrait, d'installation et de nettoyage pour rendre les images aussi petites que le logiciel installé.

Cela rend la vie beaucoup plus difficile ...

Le dockerBuild n'a pas d'étapes RUN sans validation.