Ansible 中小企业高可用负载均衡部署方案

Posted 2021-04-15 运维网

一、前言

ansible作为一款灵活、高效、功能丰富的自动化部署工具在企业运维管理中备受推崇。经过测试，我来使用ansible部署小型企业服务框架，实现高可用、负载均衡的目标。如有错误敬请赐教。

目标环境拓扑：

环境介绍：

IP一览：

主机名	IP	功能
ansible-master	192.168.23.63	ansible管理机
ansible-vs1	192.168.23.71	vs1(nginx+keepalived)
ansible-vs2	192.168.23.72	vs2(nginx+keepalived)
ansible-rs1	192.168.23.61	rs1(httpd+php+wordpress)
ansible-rs2	192.168.23.62	rs2(httpd+php+wordpress)
ansible-mariadb	192.168.23.73	mariadb

环境介绍：

IP一览：

主机名	IP	功能
ansible-master	192.168.23.63	ansible管理机
ansible-vs1	192.168.23.71	vs1(nginx+keepalived)
ansible-vs2	192.168.23.72	vs2(nginx+keepalived)
ansible-rs1	192.168.23.61	rs1(httpd+php+wordpress)
ansible-rs2	192.168.23.62	rs2(httpd+php+wordpress)
ansible-mariadb	192.168.23.73	mariadb

　　 
二、环境准备：
2.1 管理端安装ansible，配置ssh秘钥使主机间实现基于密钥的认证，测试是否可以互相连接！
ssh-keygen  -t rsa  #三次回车，中途的问题是问秘钥存放位置（默认/root/.ssh）,是否加密秘钥。实验方便这里不加密。
ssh-copy-id -i .ssh/id_rsa.pub root@192.168.23.71 #将公钥发送给目标主机
ssh-copy-id -i .ssh/id_rsa.pub root@192.168.23.72
ssh-copy-id -i .ssh/id_rsa.pub root@192.168.23.73
ssh-copy-id -i .ssh/id_rsa.pub root@192.168.23.61
ssh-copy-id -i .ssh/id_rsa.pub root@192.168.23.62

2.2 编辑ansible的hosts文件，定义所有的主机
vim /etc/ansible/hosts
[web]
192.168.23.61
192.168.23.62
[nginx]
192.168.23.71 state=MASTER priority=100
192.168.23.72 state=BACKUP priotity=90
[mysql]
192.168.23.73

2.3 为所有主机同步时间
ansible all -a 'ntpdate cn.pool.ntp.org'

2.4 创建ansible相关角色的目录
mkdir -pv /etc/ansible/roles/{mysql,web,nginx}/{files,tasks,templates,vars,handlers,meta}

三、配置web的playbook:
3.1 创建tasks文件
vim /etc/ansible/roles/web/tasks/main.yml
- name: install web pakgs
  yum: name={{ item }}
  with_items:
  - httpd
  - php
  - php-mysql
- name: config  web
  copy: src=httpd.conf dest=/etc/httpd/conf/httpd.conf
  notify: restart the service # 注意这里要与handlers里定义的name相同
- name: copy wordpress
  synchronize: src=wordpress dest=/var/www/html/wordpress/
- name: restart the service
  service: name=httpd state=started

3.2 创建handles
vim /etc/ansible/roles/web/handlers/main.yml
- name: restart the service  #就这
  service: name=httpd state=restarted

3.3 添加要复制过去的配置文件
放在/etc/ansible/roles/web/files/下 ① WordPress目录 ② httpd.conf #从别的地方考过来

3.4 修改WordPress连接数据库的配置文件
cd wordpress
cp wp-config-sample.php  wp-config.php
vim wp-config.php
/** WordPress数据库的名称 */
define('DB_NAME', 'wp');

/** MySQL数据库用户名 */
define('DB_USER', 'wpuser');

/** MySQL数据库密码 */
define('DB_PASSWORD', 'lovelinux');

/** MySQL主机 */
define('DB_HOST', '192.168.23.73');

/** 创建数据表时默认的文字编码 */
define('DB_CHARSET', 'utf8');


3.5 添加web主剧本
vim /etc/ansible/web.yml
- hosts: web
  remote_user: root
  roles:
  - web

3.6 测试，没问题的话就下一步
（-C, –check 指定该参数后，执行playbook文件不会真正去执行，而是模拟执行一遍，然后输出本次执行会对远程主机造成的修改）
ansible-playbook -C /etc/ansible/web.yml

四、配置代理层：
4.1 添加task任务
vim /etc/ansible/roles/nginx/tasks/main.yml
- name: install package
  yum: name={{ item }}
  with_items:
  - nginx
  - keepalived
- name: config keepalived
  template: src=keepalived.conf.j2 dest=/etc/keepalived/keepalived.conf
  notify: restart keepalived
- name: config nginx
  template: src=nginx.conf.j2 dest=/etc/nginx/nginx.conf
  notify: restart nginx
- name: start service
  service: name={{ item }} state=started enabled=yes
  with_items:
  - keepalived
  - nginx

4.2 添加handlers
vim /etc/ansible/roles/nginx/handlers/main.yml
- name: restart keepalived
  service: name=keepalived state=restarted
- name: restart nginx
  service: name=nginx state=restarted

4.3 准备template文件
①keepalived.conf.j2  ②nginx.conf.j2

4.4 修改keepalived模板文件keepalived.conf.j2
global_defs {
   notification_email {
     [e-mail]
   }
   notification_email_from [e-mail]
   smtp_server 127.0.0.1
   smtp_connect_timeout 30
   router_id {{ansible_hostname}} #自带变量，通过ansible 主机IP -m setup 查询
   vrrp_mcast_group4 224.0.0.43
}

vrrp_instance VI_1 {
    state {{ state }} #已通过hosts文件定义变量
    interface ens33 #网卡名
    virtual_router_id 51
    priority {{ priority }}
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass lovelinux #设置密码
    }
    virtual_ipaddress {
        192.168.23.88 #虚拟IP
    }
}

4.5 修改nginx模板文件nginx.conf.j2(定义在http段)
events {
  worker_connections  1024;  ## Default: 1024
}
http
{
upstream servers2.mydomain.com {
        server 192.168.23.61;
        server 192.168.23.62;
        ip_hash;

}

server{
    listen 80;
    server_name www.mydomain.com;
    root        /usr/share/nginx/html;

    location / {
        proxy_pass http://servers2.mydomain.com;
        proxy_set_header Host $host;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    }
}
}

4.6 添加nginx主剧本
vim /etc/ansible/nginx.yml
- hosts: nginx
  remote_user: root
  roles:
  - nginx

4.7 测试，没问题的话就下一步
ansible-playbook -C /etc/ansible/nginx.yml

五、配置mariadb:
5.1 配置mariadb的任务清单
vim /etc/ansible/roles/mysql/tasks/main.yml
roles/mysql/tasks/main.yml
- name: install mariadb
  yum: name=mariadb-server
- name: copy sql file
  copy: src=mysql.sql dest=/tmp/mysql.sql
- name: start mysql service
  service: name=mariadb state=started
- name: config mysql
  shell: "mysql < /tmp/mysql.sql"

5.2 设置files文件
vim /etc/ansible/roles/mysql/files/mysql.sql
CREATE DATABASE wp;
GRANT ALL ON wp.* TO 'wpuser'@'%' IDENTIFIED BY 'lovelinux';

5.3 添加mysql主剧本
vim /etc/ansible/mysql.yml
- hosts: mysql
  remote_user: root
  roles:
  - mysql

5.4 测试，没问题的话就下一步
ansible-playbook -C /etc/ansible/mysql.yml

六、开始表演（执行剧本）：

6.1 目录结构

6.2 分别执行

ansible-playbook  web.yml

ansible-playbook  nginx.yml

ansible-playbook  mysql.yml

6.3 访问页面

http://192.168.23.88/wordpress

七、项目总结：

7.1 在定义web的playbook时复制wordpress时开始用的是copy模块执行总是不成功，报错，google找到用synchronize模块要比copy模块高效安全的多，synchronize采用rsync复制文件，所以系统必须安装rsync 包否则无法使用这个模块。

使用该模块的优点有

① 增量复制(只复制与目标主机有差异的文件) ② 复制时采用压缩，对复制大文件支持优秀（用copy复制大文件会出错）