Dockerfile 定制专属镜像

Posted 2022-08-30 LinkSLA

前言

大家好，本文是对 Docker 自定义镜像的详细讲解，讲解了如何进行构建自己的 Docker 镜像以及 Dockerfile 的操作指令。希望对大家有所帮助~

一、使用 Dockerfile 定制镜像

1.1、Dockerfile 定制镜像

镜像的定制实际上就是定制每一层所添加的配置、文件。如果我们可以把每一层修改、安装、构建、操作的命令都写入一个脚本，用这个脚本来构建、定制镜像，无法重复的问题、镜像构建透明性的问题、体积的问题就都会解决。这个脚本就是 ​​Dockerfile​​。

​​Dockerfile​​ 是一个文本文件，其内包含了一条条的指令(Instruction)，每一条指令构建一层，因此每一条指令的内容，就是描述该层应当如何构建。

以 ​​nginx​​ 镜像为例，这次我们使用 ​​Dockerfile​​ 来定制。

在一个空白目录中，建立一个文本文件，并命名为 ​​Dockerfile​​：

$ mkdir mynginx
$ cd mynginx
$ touch Dockerfile

其内容为：

FROM nginx
RUN echo <h1>Hello, Docker!</h1> > /usr/share/nginx/html/index.html

这个 ​​Dockerfile​​ 很简单，一共就两行。涉及到了两条指令，​​FROM​​ 和 ​​RUN​​。

1.2、FROM 指定基础镜像

所谓定制镜像，那一定是以一个镜像为基础，在其上进行定制。就像我们之前运行了一个 ​​nginx​​ 镜像的容器，再进行修改一样，基础镜像是必须指定的。而 ​​FROM​​ 就是指定基础镜像，因此一个 ​​Dockerfile​​ 中 ​​FROM​​是必备的指令，并且必须是第一条指令。

在 ​​Docker Store​​ 上有非常多的高质量的官方镜像，有可以直接拿来使用的服务类的镜像，如 ​​nginx​​、​​redis​​、​​mongo​​、​​mysql​​、​​httpd​​、​​php​​、​​tomcat​​ 等；也有一些方便开发、构建、运行各种语言应用的镜像，如​​node​​、​​openjdk​​、​​python​​、​​ruby​​、​​golang​​等。可以在其中寻找一个最符合我们最终目标的镜像为基础镜像进行定制。

如果没有找到对应服务的镜像，官方镜像中还提供了一些更为基础的操作系统镜像，如​​ubuntu​​、​​debian​​、​​centos​​、​​fedora​​、​​alpine​​ 等，这些操作系统的软件库为我们提供了更广阔的扩展空间。

除了选择现有镜像为基础镜像外，​​Docker​​ 还存在一个特殊的镜像，名为 ​​scratch​​。这个镜像是虚拟的概念，并不实际存在，它表示一个空白的镜像。

FROM scratch
...

如果你以 ​​scratch​​ 为基础镜像的话，意味着你不以任何镜像为基础，接下来所写的指令将作为镜像第一层开始存在。

不以任何系统为基础，直接将可执行文件复制进镜像的做法并不罕见，比如​​swarm​​、​​coreos/etcd​​。对于 Linux 下静态编译的程序来说，并不需要有操作系统提供运行时支持，所需的一切库都已经在可执行文件里了，因此直接 ​​FROM scratch​​ 会让镜像体积更加小巧。使用 Go 语言开发的应用很多会使用这种方式来制作镜像，这也是为什么有人认为 ​​Go​​ 是特别适合容器微服务架构的语言的原因之一。

1.3、RUN 执行命令

​​RUN​​ 指令是用来执行命令行命令的。由于命令行的强大能力，​​RUN​​ 指令在定制镜像时是最常用的指令之一。其格式有两种：

• shell 格式：RUN <命令>，就像直接在命令行中输入的命令一样。刚才写的 Dockerfile 中的 RUN 指令就是这种格式。

RUN echo <h1>Hello, Docker!</h1> > /usr/share/nginx/html/index.html

• exec 格式：RUN ["可执行文件", "参数1", "参数2"]，这更像是函数调用中的格式。

既然 ​​RUN​​ 就像 ​​Shell​​ 脚本一样可以执行命令，那么我们是否就可以像 ​​Shell​​ 脚本一样把每个命令对应一个 ​​RUN​​ 呢？比如这样：

FROM debian:jessie

RUN apt-get update
RUN apt-get install -y gcc libc6-dev make
RUN wget -O redis.tar.gz "http://download.redis.io/releases/redis-3.2.5.tar.gz"
RUN mkdir -p /usr/src/redis
RUN tar -xzf redis.tar.gz -C /usr/src/redis --strip-components=1
RUN make -C /usr/src/redis
RUN make -C /usr/src/redis install

之前说过，​​Dockerfile​​ 中每一个指令都会建立一层，​​RUN​​ 也不例外。每一个 ​​RUN​​ 的行为，就和刚才我们手工建立镜像的过程一样：新建立一层，在其上执行这些命令，执行结束后，​​commit​​ 这一层的修改，构成新的镜像。

而上面的这种写法，创建了 7 层镜像。这是完全没有意义的，而且很多运行时不需要的东西，都被装进了镜像里，比如编译环境、更新的软件包等等。结果就是产生非常臃肿、非常多层的镜像，不仅仅增加了构建部署的时间，也很容易出错。这是很多初学 ​​Docker​​ 的人常犯的一个错误。

​​Union FS​​​ 是有最大层数限制的，比如 ​​​AUFS​​​，曾经是最大不能超过 42 层，现在是不能超过 127 层。

上面的 ​​Dockerfile​​ 正确的写法应该是这样：

FROM debian:jessie

RUN buildDeps=gcc libc6-dev make \\
    && apt-get update \\
    && apt-get install -y $buildDeps \\
    && wget -O redis.tar.gz "http://download.redis.io/releases/redis-3.2.5.tar.gz" \\
    && mkdir -p /usr/src/redis \\
    && tar -xzf redis.tar.gz -C /usr/src/redis --strip-components=1 \\
    && make -C /usr/src/redis \\
    && make -C /usr/src/redis install \\
    && rm -rf /var/lib/apt/lists/* \\
    && rm redis.tar.gz \\
    && rm -r /usr/src/redis \\
    && apt-get purge -y --auto-remove $buildDeps

首先，之前所有的命令只有一个目的，就是编译、安装 ​​Redis​​ 可执行文件。因此没有必要建立很多层，这只是一层的事情。因此，这里没有使用很多个 ​​RUN​​ 对一一对应不同的命令，而是仅仅使用一个 ​​RUN​​ 指令，并使用 ​​&&​​ 将各个所需命令串联起来。将之前的 7 层，简化为了 1 层。在撰写 ​​Dockerfile​​ 的时候，要经常提醒自己，这并不是在写 ​​Shell​​ 脚本，而是在定义每一层该如何构建。

并且，这里为了格式化还进行了换行。​​Dockerfile​​ 支持 Shell 类的行尾添加 ​​\\​​ 的命令换行方式，以及行首 ​​#​​ 进行注释的格式。良好的格式，比如换行、缩进、注释等，会让维护、排障更为容易，这是一个比较好的习惯。

此外，还可以看到这一组命令的最后添加了清理工作的命令，删除了为了编译构建所需要的软件，清理了所有下载、展开的文件，并且还清理了 ​​apt​​ 缓存文件。这是很重要的一步，我们之前说过，镜像是多层存储，每一层的东西并不会在下一层被删除，会一直跟随着镜像。因此镜像构建时，一定要确保每一层只添加真正需要添加的东西，任何无关的东西都应该清理掉。

很多人初学 ​​Docker​​ 制作出了很臃肿的镜像的原因之一，就是忘记了每一层构建的最后一定要清理掉无关文件。

1.4、构建镜像

再回到之前定制的 ​​Nginx​​ 镜像的 ​​Dockerfile​​ 来。现在我们明白了这个 ​​Dockerfile​​ 的内容，那么让我们来构建这个镜像吧。

在 ​​Dockerfile​​ 文件所在目录执行：

$ docker build -t nginx:v3 .
Sending build context to Docker daemon 2.048 kB
Step 1 : FROM nginx
 ---> e43d811ce2f4
Step 2 : RUN echo <h1>Hello, Docker!</h1> > /usr/share/nginx/html/index.html
 ---> Running in 9cdc27646c7b
 ---> 44aa4490ce2c
Removing intermediate container 9cdc27646c7b
Successfully built 44aa4490ce2c

从命令的输出结果中，我们可以清晰的看到镜像的构建过程。在 ​​Step 2​​中，如同我们之前所说的那样，​​RUN​​ 指令启动了一个容器 ​​9cdc27646c7b​​，执行了所要求的命令，并最后提交了这一层 ​​44aa4490ce2c​​，随后删除了所用到的这个容器 ​​9cdc27646c7b​​。

这里我们使用了 ​​docker build​​ 命令进行镜像构建。其格式为：

docker build [选项] <上下文路径/URL/->

在这里我们指定了最终镜像的名称 ​​-t nginx:v3​​，构建成功后，我们可以像之前运行 ​​nginx:v2​​ 那样来运行这个镜像，其结果会和 ​​nginx:v2​​一样。

1.5、镜像构建上下文（Context）

如果注意，会看到 ​​docker build​​ 命令最后有一个 ​​.​​，​​.​​ 表示当前目录，而 ​​Dockerfile​​ 就在当前目录，因此不少初学者以为这个路径是在指定 ​​Dockerfile​​ 所在路径，这么理解其实是不准确的。如果对应上面的命令格式，你可能会发现，这是在指定上下文路径。那么什么是上下文呢？

首先我们要理解 ​​docker build​​ 的工作原理。​​Docker​​ 在运行时分为 ​​Docker​​ 引擎（也就是服务端守护进程）和客户端工具。​​Docker​​ 的引擎提供了一组 REST API，被称为 ​​Docker Remote API​​，而如 ​​docker​​ 命令这样的客户端工具，则是通过这组 ​​API​​ 与 ​​Docker​​ 引擎交互，从而完成各种功能。因此，虽然表面上我们好像是在本机执行各种 ​​docker​​ 功能，但实际上，一切都是使用的远程调用形式在服务端（​​Docker​​ 引擎）完成。也因为这种 ​​C/S​​ 设计，让我们操作远程服务器的 ​​Docker​​ 引擎变得轻而易举。

当我们进行镜像构建的时候，并非所有定制都会通过 ​​RUN​​ 指令完成，经常会需要将一些本地文件复制进镜像，比如通过 ​​COPY​​ 指令、​​ADD​​ 指令等。而 ​​docker build​​ 命令构建镜像，其实并非在本地构建，而是在服务端，也就是 ​​Docker​​ 引擎中构建的。那么在这种客户端/服务端的架构中，如何才能让服务端获得本地文件呢？

这就引入了上下文的概念。当构建的时候，用户会指定构建镜像上下文的路径，​​docker build​​ 命令得知这个路径后，会将路径下的所有内容打包，然后上传给 ​​Docker​​ 引擎。这样 ​​Docker​​ 引擎收到这个上下文包后，展开就会获得构建镜像所需的一切文件。

如果在 ​​Dockerfile​​ 中这么写：

COPY ./package.json /app/

这并不是要复制执行 ​​docker build​​ 命令所在的目录下的 ​​package.json​​，也不是复制 ​​Dockerfile​​ 所在目录下的 ​​package.json​​，而是复制 上下文（context） 目录下的 ​​package.json​​。

因此，​​COPY​​ 这类指令中的源文件的路径都是相对路径。这也是初学者经常会问的为什么 ​​COPY ../package.json /app​​ 或者 ​​COPY /opt/xxxx /app​​ 无法工作的原因，因为这些路径已经超出了上下文的范围，Docker 引擎无法获得这些位置的文件。如果真的需要那些文件，应该将它们复制到上下文目录中去。

现在就可以理解刚才的命令 ​​docker build -t nginx:v3 .​​ 中的这个 ​​.​​，实际上是在指定上下文的目录，​​docker build​​ 命令会将该目录下的内容打包交给 Docker 引擎以帮助构建镜像。

如果观察 ​​docker build​​ 输出，我们其实已经看到了这个发送上下文的过程：

$ docker build -t nginx:v3 .
Sending build context to Docker daemon 2.048 kB
...

理解构建上下文对于镜像构建是很重要的，避免犯一些不应该的错误。比如有些初学者在发现 ​​COPY /opt/xxxx /app​​ 不工作后，于是干脆将 ​​Dockerfile​​ 放到了硬盘根目录去构建，结果发现 ​​docker build​​ 执行后，在发送一个几十 ​​GB​​ 的东西，极为缓慢而且很容易构建失败。那是因为这种做法是在让 ​​docker build​​ 打包整个硬盘，这显然是使用错误。

一般来说，应该会将 ​​Dockerfile​​ 置于一个空目录下，或者项目根目录下。如果该目录下没有所需文件，那么应该把所需文件复制一份过来。如果目录下有些东西确实不希望构建时传给 Docker 引擎，那么可以用 ​​.gitignore​​ 一样的语法写一个 ​​.dockerignore​​，该文件是用于剔除不需要作为上下文传递给 Docker 引擎的。

那么为什么会有人误以为 ​​.​​ 是指定 ​​Dockerfile​​ 所在目录呢？这是因为在默认情况下，如果不额外指定 ​​Dockerfile​​ 的话，会将上下文目录下的名为 ​​Dockerfile​​ 的文件作为 Dockerfile。

这只是默认行为，实际上 ​​Dockerfile​​ 的文件名并不要求必须为 ​​Dockerfile​​，而且并不要求必须位于上下文目录中，比如可以用 ​​-f ../Dockerfile.php​​ 参数指定某个文件作为 ​​Dockerfile​​。

当然，一般大家习惯性的会使用默认的文件名 ​​Dockerfile​​，以及会将其置于镜像构建上下文目录中

​​Docker+K8s+Jenkins 主流技术全解视频资料【干货免费分享】​​

1.6、其他 docker build 的用法

1.6.1、直接用 Git repo 进行构建

​​docker build​​ 还支持从 ​​URL​​ 构建，比如可以直接从 ​​Git repo​​ 中构建：

$ docker build https://github.com/twang2218/gitlab-ce-zh.git#:8.14
docker build https://github.com/twang2218/gitlab-ce-zh.git\\#:8.14
Sending build context to Docker daemon 2.048 kB
Step 1 : FROM gitlab/gitlab-ce:8.14.0-ce.0
8.14.0-ce.0: Pulling from gitlab/gitlab-ce
aed15891ba52: Already exists
773ae8583d14: Already exists
...

这行命令指定了构建所需的 ​​Git repo​​，并且指定默认的 ​​master​​ 分支，构建目录为 ​​/8.14/​​，然后 Docker 就会自己去 ​​git clone​​ 这个项目、切换到指定分支、并进入到指定目录后开始构建。

1.6.2、用给定的 tar 压缩包构建

$ docker build http://server/context.tar.gz

如果所给出的 URL 不是个 ​​Git repo​​，而是个 ​​tar​​ 压缩包，那么 ​​Docker​​ 引擎会下载这个包，并自动解压缩，以其作为上下文，开始构建。

1.6.3、从标准输入中读取 Dockerfile 进行构建

docker build - < Dockerfile

或

cat Dockerfile | docker build -

如果标准输入传入的是文本文件，则将其视为 ​​Dockerfile​​，并开始构建。这种形式由于直接从标准输入中读取 ​​Dockerfile​​ 的内容，它没有上下文，因此不可以像其他方法那样可以将本地文件 ​​COPY​​ 进镜像之类的事情。

1.6.4、从标准输入中读取上下文压缩包进行构建

$ docker build - < context.tar.gz

如果发现标准输入的文件格式是 ​​gzip​​、​​bzip2​​ 以及 ​​xz​​ 的话，将会使其为上下文压缩包，直接将其展开，将里面视为上下文，并开始构建。

二、Dockerfile 指令

我们已经介绍了 ​​FROM​​，​​RUN​​，还提及了 ​​COPY​​, ​​ADD​​，其实 ​​Dockerfile​​ 功能很强大，它提供了十多个指令。下面我们继续讲解其他的指令。

2.1、COPY

格式：

• ​​COPY <源路径>... <目标路径>​​
• ​​COPY ["<源路径1>",... "<目标路径>"]​​

和 ​​RUN​​ 指令一样，也有两种格式，一种类似于命令行，一种类似于函数调用。

​​COPY​​ 指令将从构建上下文目录中 ​​<源路径>​​ 的文件/目录复制到新的一层的镜像内的 ​​<目标路径>​​ 位置。比如：

COPY package.json /usr/src/app/

​​<源路径>​​ 可以是多个，甚至可以是通配符，其通配符规则要满足 ​​Go​​ 的 ​​filepath.Match​​ 规则，如：

COPY hom* /mydir/
COPY hom?.txt /mydir/

​​<目标路径>​​ 可以是容器内的绝对路径，也可以是相对于工作目录的相对路径（工作目录可以用 ​​WORKDIR​​ 指令来指定）。目标路径不需要事先创建，如果目录不存在会在复制文件前先行创建缺失目录。

此外，还需要注意一点，使用 ​​COPY​​ 指令，源文件的各种元数据都会保留。比如读、写、执行权限、文件变更时间等。这个特性对于镜像定制很有用。特别是构建相关文件都在使用 ​​Git​​ 进行管理的时候。

2.2、ADD

​​ADD​​ 指令和 ​​COPY​​ 的格式和性质基本一致。但是在 ​​COPY​​ 基础上增加了一些功能。

比如 ​​<源路径>​​ 可以是一个 ​​URL​​，这种情况下，Docker 引擎会试图去下载这个链接的文件放到 ​​<目标路径>​​ 去。下载后的文件权限自动设置为 ​​600​​，如果这并不是想要的权限，那么还需要增加额外的一层 ​​RUN​​ 进行权限调整，另外，如果下载的是个压缩包，需要解压缩，也一样还需要额外的一层 ​​RUN​​ 指令进行解压缩。所以不如直接使用 ​​RUN​​ 指令，然后使用 ​​wget​​ 或者 ​​curl​​ 工具下载，处理权限、解压缩、然后清理无用文件更合理。因此，这个功能其实并不实用，而且不推荐使用。

如果 ​​<源路径>​​ 为一个 ​​tar​​ 压缩文件的话，压缩格式为 ​​gzip​​, ​​bzip2​​以及 ​​xz​​ 的情况下，​​ADD​​ 指令将会自动解压缩这个压缩文件到 ​​<目标路径>​​ 去。

在某些情况下，这个自动解压缩的功能非常有用，比如官方镜像 ​​ubuntu​​中：

FROM scratch
ADD ubuntu-xenial-core-cloudimg-amd64-root.tar.gz /
...

但在某些情况下，如果我们真的是希望复制个压缩文件进去，而不解压缩，这时就不可以使用 ​​ADD​​ 命令了。

在 ​​Docker​​ 官方的 ​​Dockerfile 最佳实践文档​​ 中要求，尽可能的使用 ​​COPY​​，因为 ​​COPY​​ 的语义很明确，就是复制文件而已，而 ​​ADD​​ 则包含了更复杂的功能，其行为也不一定很清晰。最适合使用 ​​ADD​​ 的场合，就是所提及的需要自动解压缩的场合。

另外需要注意的是，​​ADD​​ 指令会令镜像构建缓存失效，从而可能会令镜像构建变得比较缓慢。

因此在 ​​COPY​​ 和 ​​ADD​​ 指令中选择的时候，可以遵循这样的原则，所有的文件复制均使用 ​​COPY​​ 指令，仅在需要自动解压缩的场合使用 ​​ADD​​。

2.3、CMD

​​CMD​​ 指令的格式和 ​​RUN​​ 相似，也是两种格式：

• ​​shell​​ 格式：CMD <命令>
• ​​exec​​ 格式：CMD ["可执行文件", "参数1", "参数2"...]
• 参数列表格式：CMD ["参数1", "参数2"...]。在指定了 ENTRYPOINT指令后，用 CMD 指定具体的参数。

之前介绍容器的时候曾经说过，Docker 不是虚拟机，容器就是进程。既然是进程，那么在启动容器的时候，需要指定所运行的程序及参数。​​CMD​​ 指令就是用于指定默认的容器主进程的启动命令的。

在运行时可以指定新的命令来替代镜像设置中的这个默认命令，比如，​​ubuntu​​ 镜像默认的 ​​CMD​​ 是 ​​/bin/bash​​，如果我们直接 ​​docker run -it ubuntu​​ 的话，会直接进入 ​​bash​​。我们也可以在运行时指定运行别的命令，如 ​​docker run -it ubuntu cat /etc/os-release​​。这就是用 ​​cat /etc/os-release​​ 命令替换了默认的 ​​/bin/bash​​ 命令了，输出了系统版本信息。

在指令格式上，一般推荐使用 ​​exec​​ 格式，这类格式在解析时会被解析为 ​​JSON​​ 数组，因此一定要使用双引号 ​​"​​，而不要使用单引号。

如果使用 ​​shell​​ 格式的话，实际的命令会被包装为 ​​sh -c​​ 的参数的形式进行执行。比如：

CMD echo $HOME

在实际执行中，会将其变更为：

CMD [ "sh", "-c", "echo $HOME" ]

这就是为什么我们可以使用环境变量的原因，因为这些环境变量会被 shell 进行解析处理。

提到 ​​CMD​​ 就不得不