关于 docekr 的 docker-storage-setup 出错的问题

Posted 2020-07-28

[[email protected] ~]# docker version
Client:
 Version:         1.9.1
 API version:     1.21
 Package version: docker-common-1.9.1-40.el7.centos.x86_64
 Go version:      go1.4.2
 Git commit:      ab77bde/1.9.1
 Built:           
 OS/Arch:         linux/amd64

Server:
 Version:         1.9.1
 API version:     1.21
 Package version: docker-common-1.9.1-40.el7.centos.x86_64
 Go version:      go1.4.2
 Git commit:      ab77bde/1.9.1
 Built:           
 OS/Arch:         linux/amd64

启动 docker 发现如下日志；

Jun 22 18:00:11 localhost systemd: docker-storage-setup.service: main process exited, code=exited, status=1/FAILURE

Jun 22 18:00:11 localhost systemd: Failed to start Docker Storage Setup.

Jun 22 18:00:11 localhost systemd: Unit docker-storage-setup.service entered failed state.

Jun 22 18:00:11 localhost systemd: docker-storage-setup.service failed.

分析：说是 docker-storage-setup.service 不能运行。这个服务呼叫 docker-storage-setup 命令，而这个命令

是要看 /etc/sysconfig/docker-storage-setup 文件的。

  man docker-storage-setup:STORAGE_DRIVER: 默认即是"devicemapper",这也正是我们需要的，其他的还有"" 空值，和 "overlay", devicemapper 是依赖于 lvm 的，在早一点的 centos7 上就是如此，在这一版（可能稍新）就会报错。

  后面试了VG 跟 DEVS 选项，仍然不行。

  百度一下错误，没有此相关的，有说数据卷建成后，报错数据满了导致报错的。

  google不也，bing 了下，找到了几个相关的问题：

  1. 还是 /etc/sysconfig/docker-storage-setup 的原因导致的。 

  2. /etc/sysconfig/docker-storage 这个文件的内容是不能写的，是要用docker-storage-setup 生成的，而这个命令是要读取 /etc/sysconfig/docker-storage-setup 这个文件的配置的。

  3.搜索到了这样一句话：

  Also, in a cloud (OpenStack/AWS/etc.) scenario with the devicemapper backend, docker-storage-setup can also expand the root volume group to fill the space allocated for the root disk if GROWPART=true is set.

  大意是使用devicemapper 选项的话，那么要使用 GROWPART = true 选项来启用 lvm 的调整。而默认这个选项是 false的。

  而这个选项的开启要依赖 /usr/bin/growpart 命令。

解决：

  1.停止docker 服务

  2.删除 /var/lib/docker 目录

  3.在 /etc/sysconfig/docker-storage-setup 文件里添加

   STORAGE_DRIVER="devicemapper"

   GROWPART="true"

  4./usr/bin/growpart 命令用 yum search 搜索结果为 cloud-utils-growpart-0.27-20.el7.centos.x86_64。yum 安装此包.

 5.启动docker， 查看日志信息已经正常，查看 /etc/sysconfig/docker-storage 文件 ，已经有了以下内容：

DOCKER_STORAGE_OPTIONS="--storage-driver devicemapper --storage-opt dm.fs=xfs --storage-opt dm.thinpooldev=/dev/mapper/centos-docker--pool --storage-opt dm.use_deferred_removal=true --storage-opt dm.use_deferred_deletion=true "

  虽然还有关于防火墙的报错，但是那是另外的原因造成的。这个问题已经OK了

notice:

  1.STORAGE_DRIVER="devicemapper"  是需要 lvm 的支持的。最好是在装系统时 就是装在 lvm 上的。否则，那就要新建一个 vg 比如 "centos", 然后在 /etc/sysconfig/docker-storage-setup 里再加上

 

VG="centos"

  这个也已经验证过了。

  2.刚开始发现这个错误，是因为启用 -v /root/ldap:/var/lib/ldap 数据卷后，在container竟然无法读写/var/lib/ldap 目录。然后看日志才发现了这个错误。把这个问题解决后，发现依然无法读写. 又百了下，原来是 selinux 没关导致的。

# setenforce 0

  成功解决问题。那么你可能要说，是不是不解决上面的问题，关掉selinux 也没问题呢？我觉得只要我发现这个报错了，我就会解决的，也许现在没影响，但是 docker 的存储（数据卷）是重要的功能，总会因为此报错而产生其他的错误的。

  3.试过另外一个选项, STORAGE_DRIVER="overlay", 这样的话，也不报错了，而且在 /var/lib/docker 目录下的文件也发生了变化。具体的作用还不清楚。

本文出自 “海风久远” 博客，请务必保留此出处http://beyondhf.blog.51cto.com/8953234/1792029