Ansible自动化部署k8s-1.16.0版集群

Posted 2020-11-23

                         Ansible自动化部署k8s二进制集群

Ansible是一种IT自动化工具。它可以配置系统，部署软件以及协调更高级的IT任务，例如持续部署，滚动更新。Ansible适用于管理企业IT基础设施。 这里我通过Ansible来实现Kubernetes v1.16 高可用集群自动部署（离线版） （但是还是需要网络，因为这里需要去部署flannel,coredns,ingress,dashboard插件，需要拉取镜像

Ansible自动化部署k8s-1.16.0版集群
介绍

使用ansible自动化部署k8s集群(支持单master,多master)离线版
软件架构

软件架构说明
单master架构

多master架构

1.安装教程

先部署一台Ansible来做管控节点，安装步骤这里省略
将两个文件都解压到ansible服务器上，我的工作目录是在/opt/下，将解压的目录都放在/opt下
修改hosts文件，指定部署是单master,还是多master,以及group_var下的all的变量，将ip指定需要修改的

2.使用说明

单master,4c,8g,(1台master,2台node,1台ansible)
多master,4c,8g,(2台master,2台node,1台ansible,2台nginx)
如果部署的是多master主机，那么需要在nginx上再跑1个keepalived,如果是云主机可以拿slb来补充

1.系统初始化

1. 关闭selinux，firewalld
2. 关闭swap
3. 时间同步
4. 写hosts
   2. Etcd集群部署
5. 生成etcd证书
6. 部署三个etcd集群
7. 查看集群状态
   3. 部署Master
8. 生成apiserver证书
9. 部署apiserver、controller-manager和scheduler组件
10. 启动TLS Bootstrapping
    4. 部署Node
11. 安装Docker
12. 部署kubelet和kube-proxy
13. 在Master上允许为新Node颁发证书
14. 授权apiserver访问kubelet
    5. 部署插件（准备好镜像）
15. Flannel
16. Web UI
17. CoreDNS
18. Ingress Controller
    6. Master高可用
19. 增加Master节点（与Master1一致）
20. 部署Nginx负载均衡器
21. Nginx+Keepalived高可用
22. 修改Node连接VIP

3.Roles组织K8S各组件部署解析

编写建议：

1. 梳理流程和Roles结构
2. 如果配置文件有不固定内容，使用jinja渲染
3. 人工干预改动的内容应统一写到一个文件中

下载所需文件

确保所有节点系统时间一致

4.下载Ansible部署文件：

git clone [e-mail]:zhaocheng172/ansible-k8s.git

拉取代码的时候，请把你的公钥发给我，不然你拉取不下来
下载软件包并解压：
https://pan.baidu.com/s/1Wf9sFR4zkpx_D0BJbZK7ZQ

tar zxf binary_pkg.tar.gz

修改Ansible文件

修改hosts文件，根据规划修改对应IP和名称。

vi hosts

修改group_vars/all.yml文件，修改软件包目录和证书可信任IP。
vim group_vars/all.yml
software_dir: ‘/root/binary_pkg‘
...
cert_hosts:
k8s:
etcd:

5.一键部署

单Master版
ansible-playbook -i hosts single-master-deploy.yml -uroot -k
多Master版：
ansible-playbook -i hosts multi-master-deploy.yml -uroot -k

6、部署控制

如果安装某个阶段失败，可针对性测试.

例如：只运行部署插件
ansible-playbook -i hosts single-master-deploy.yml -uroot -k --tags master

部署完效果

[root@k8s-master1 ~]# kubectl get node
NAME          STATUS   ROLES    AGE    VERSION
k8s-master1   Ready    <none>   2d3h   v1.16.0
k8s-node1     Ready    <none>   2d3h   v1.16.0
k8s-node2     Ready    <none>   2d3h   v1.16.0

[root@k8s-master1 ~]# kubectl get cs
NAME                 AGE
controller-manager   <unknown>
scheduler            <unknown>
etcd-2               <unknown>
etcd-0               <unknown>
etcd-1               <unknown>

[root@k8s-master1 ~]# kubectl get pod,svc -A
NAMESPACE              NAME                                             READY   STATUS    RESTARTS   AGE
ingress-nginx          pod/nginx-ingress-controller-8zp8r               1/1     Running   0          2d3h
ingress-nginx          pod/nginx-ingress-controller-bfgj6               1/1     Running   0          2d3h
ingress-nginx          pod/nginx-ingress-controller-n5k22               1/1     Running   0          2d3h
kube-system            pod/coredns-59fb8d54d6-n6m5w                     1/1     Running   0          2d3h
kube-system            pod/kube-flannel-ds-amd64-jwvw6                  1/1     Running   0          2d3h
kube-system            pod/kube-flannel-ds-amd64-m92sg                  1/1     Running   0          2d3h
kube-system            pod/kube-flannel-ds-amd64-xwf2h                  1/1     Running   0          2d3h
kubernetes-dashboard   pod/dashboard-metrics-scraper-566cddb686-smw6p   1/1     Running   0          2d3h
kubernetes-dashboard   pod/kubernetes-dashboard-c4bc5bd44-zgd82         1/1     Running   0          2d3h

NAMESPACE              NAME                                TYPE        CLUSTER-IP   EXTERNAL-IP   PORT(S)          AGE
default                service/kubernetes                  ClusterIP   10.0.0.1     <none>        443/TCP          2d3h
ingress-nginx          service/ingress-nginx               ClusterIP   10.0.0.22    <none>        80/TCP,443/TCP   2d3h
kube-system            service/kube-dns                    ClusterIP   10.0.0.2     <none>        53/UDP,53/TCP    2d3h
kubernetes-dashboard   service/dashboard-metrics-scraper   ClusterIP   10.0.0.176   <none>        8000/TCP         2d3h
kubernetes-dashboard   service/kubernetes-dashboard        NodePort    10.0.0.72    <none>        443:30001/TCP    2d3h