为自己的 docker 注册表提供 dockerd 的 SSL 证书

Posted

技术标签:

【中文标题】为自己的 docker 注册表提供 dockerd 的 SSL 证书【英文标题】:Provide SSL certificate for dockerd for own docker registry 【发布时间】:2019-01-30 16:14:01 【问题描述】:

如何在gitlab-ci管道中为自己的docker注册表提供自己的CA根证书和SSL客户端证书(证书+密钥)给dockerd?

我有虚拟机(CentOS 7)并安装了 docker 和 gitlab-runner。跑步者注册为docker:dind。设置工作正常,但我无法连接到我自己的 docker 注册表,该注册表具有我自己的 CA 的证书,但也在使用 客户端 SSL 证书。当我传递给dockerd 参数--insecure-registry=gitlab.mazel.tov:4567 时,它不会验证 CA,但我仍然不知道如何提供客户端 SSL 证书,并且 pipile 将因此错误而失败。

$ docker login -u gitlab-ci-token -p $CI_JOB_TOKEN https://gitlab.mazel.tov:4567
WARNING! Using --password via the CLI is insecure. Use --password-stdin.
Error response from daemon: Get https://gitlab.mazel.tov:4567/v2/: error parsing HTTP 400 response body: invalid character '<' looking for beginning of value: "<html>\r\n<head><title>400 No required SSL certificate was sent</title></head>\r\n<body bgcolor=\"white\">\r\n<center><h1>400 Bad Request</h1></center>\r\n<center>No required SSL certificate was sent</center>\r\n<hr><center>nginx</center>\r\n</body>\r\n</html>\r\n"

我在 docker:dind 容器中也有包含我的证书的文件夹,但这种方法不适用于 dockerd?但在我的电脑或服务器上它工作正常。

$ ls -la /etc/docker/certs.d/gitlab.mazel.tov\:4567/
    ca.crt
    client.cert
    client.key

我还探索了dockerd --help,但关于证书的选项仅适用于 docker 套接字,并且 i SSL 配置适用于 docker 注册表。

/etc/gitlab-runner/config.toml

[[runners]]
  name = "My Docker Runner"
  url = "https://gitlab.mazel.tov"
  token = "ac17ab5cfff675fddd059d40a3"
  tls-ca-file = "/etc/ssl/certs/myCA.pem"
  tls-cert-file = "/etc/gitlab-runner/certs/mazel.tov.pem"
  tls-key-file = "/etc/gitlab-runner/certs/mazel.tov.key"
  executor = "docker"
  [runners.docker]
    image = "docker:dind"
    privileged = true
    disable_cache = false
    volumes = ["/cache", "/etc/docker/certs.d:/etc/docker/certs.d"]
    shm_size = 0
  [runners.cache]

.gitlab-ci.yml

services:
  - name: docker:dind
    command: ["--insecure-registry=gitlab.mazel.tov:4567"]

variables:
  DOCKER_DRIVER: overlay2
  DOCKER_HOST: tcp://docker:2375/

stages:
  - build

before_script:
  - ls -la /etc/docker/certs.d/gitlab.mazel.tov\:4567/
  - docker info
  - docker login -u gitlab-ci-token -p $CI_JOB_TOKEN https://gitlab.mazel.tov:4567

build-web:
  stage: build
  script:
    - docker build ...
    - docker push ...

我也不喜欢 --insecure-registry 选项。而我的 gitlab 服务器在 Nginx 级别上配置了客户端证书。

/etc/gitlab/gitlab.rb

nginx['ssl_client_certificate'] = "/etc/gitlab/ssl/myCA.crt"
nginx['ssl_verify_client'] = "on"

证书在我的机器和其他服务器上工作正常,我只是在使用 gitlab-ci 管道实现它时遇到了麻烦......

当我在我的 mac 上测试 docker:dind 并挂载证书时,它工作正常,所以问题只出在 gitlab-ci 管道中?也许在安装文件夹发生之前加载了 dockerd?

docker run -it --rm --privileged -v ~/.docker/certs.d/:/etc/docker/certs.d/ docker:dind sh
dockerd &
docker login https://gitlab.mazel.tov:4567
** it works **

【问题讨论】:

【参考方案1】:

在 [[runners]] 下试试这个配置

 environment = ["DOCKER_TLS_CERTDIR="]

【讨论】:

以上是关于为自己的 docker 注册表提供 dockerd 的 SSL 证书的主要内容,如果未能解决你的问题,请参考以下文章

Docker学习笔记:dockerd引擎

dockerd --add-runtime与docker-container --runtime

dockerd启动配置_修改IP和systemd管理

Docker的主要组件

调整dockerd的日志输出级别

docker使用阿里云镜像仓库