Ansible自动化部署与实际项目应用介绍

Posted 2021-04-25 卓望安行IT运维服务

 一．Ansible自动化部署简介

Ansible自动化部署是当前轻运维，致力于自动化、工具化的全新维护模式，通过工具化自动化的作业，提高生产效率的同时减轻维护人员的重担。

 

Ansible，是一款基于Python开发的自动化运维工具，集合了众多运维工具（puppet、cfengine、chef、func、fabric）的优点，实现了批量系统配置、批量程序部署、批量运行命令等功能。ansible是基于模块工作的，本身没有批量部署的能力。真正具有批量部署的是ansible所运行的模块，ansible只是提供一种框架。主要包括：

（1）连接插件connection plugins：负责和被监控端实现通信

（2）host inventory：指定操作的主机，是一个配置文件里面定义监控的主机

（3）各种模块核心模块、command模块、自定义模块

（4）借助于插件完成记录日志邮件等功能

（5）playbook：剧本执行多个任务时，非必需可以让节点一次性运行多个任务。

1.    总体架构

2.    特性

(1).  noagents：不需要在被管控主机上安装任何客户端

(2).  noserver：无服务器端，使用时直接运行命令即可

(3).  modulesin any languages：基于模块工作，可使用任意语言开发模块

(4).  yaml，not code：使用yaml语言定制剧本playbook

(5).  ssh bydefault：基于SSH工作

(6).  strongmulti-tier solution：可实现多级指挥

3.    优点

(1).  轻量级，无需在客户端安装agent，更新时，只需在操作机上进行一次更新即可(2).  批量任务执行可以写成脚本，而且不用分发到远程就可以执行

(3).  使用python编写，维护更简单，ruby语法过于复杂

(4).  支持sudo

4.    任务执行流程

 二、Ansible基础安装与配置

1.    Ansible基础安装

(1). 安装依赖包

yum install gcc gcc-c++ zlib zlib-devel

(2). python2.7安装

https://www.python.org/ftp/python/2.7.8/Python-2.7.8.tgz

# tar xvzf Python-2.7.8.tgz

# cd Python-2.7.8

# ./configure --prefix=/usr/local

# make --jobs=`grepprocessor/proc/cpuinfo | wc -l`

# make install

## 将python头文件拷贝到标准目录，以避免编译ansible时，找不到所需的头文件

# cd /usr/local/include/python2.7

# cp -a ./* /usr/local/include/

## 备份旧版本的python，并符号链接新版本的python

# cd /usr/bin

# mv python python.bak

# ln -s /usr/local/bin/python python

## 修改yum脚本，使其指向旧版本的python，已避免其无法运行

# vim /usr/bin/yum

#!/usr/bin/python -->  #!/usr/bin/python2.6

 

(3). setuptools模块安装

https://pypi.python.org/packages/source/s/setuptools/setuptools-7.0.tar.gz

# tar xvzfsetuptools-7.0.tar.gz

# cd setuptools-7.0

# python setup.pyinstall

 

(4). pycrypto模块安装

https://pypi.python.org/packages/source/p/pycrypto/pycrypto-2.6.1.tar.gz

# tar xvzfpycrypto-2.6.1.tar.gz

# cd pycrypto-2.6.1

# python setup.pyinstall

(5). PyYAML模块安装

http://pyyaml.org/download/libyaml/yaml-0.1.5.tar.gz

# tar xvzf yaml-0.1.5.tar.gz

# cd yaml-0.1.5

# ./configure --prefix=/usr/local

# make --jobs=`grep processor/proc/cpuinfo | wc -l`

# make install

https://pypi.python.org/packages/source/P/PyYAML/PyYAML-3.11.tar.gz

# tar xvzf PyYAML-3.11.tar.gz

# cd PyYAML-3.11

# python setup.py install

 

(6). Jinja2模块安装

https://pypi.python.org/packages/source/M/MarkupSafe/MarkupSafe-0.9.3.tar.gz

#tar xvzf MarkupSafe-0.9.3.tar.gz

#cd MarkupSafe-0.9.3

#python setup.py install

 

https://pypi.python.org/packages/source/J/Jinja2/Jinja2-2.7.3.tar.gz

#tar xvzf Jinja2-2.7.3.tar.gz

#cd Jinja2-2.7.3

# python setup.py install

 

(7). paramiko模块安装

https://pypi.python.org/packages/source/e/ecdsa/ecdsa-0.11.tar.gz

# tar xvzf ecdsa-0.11.tar.gz

# cd ecdsa-0.11

# python setup.py install

https://pypi.python.org/packages/source/p/paramiko/paramiko-1.15.1.tar.gz

# tar xvzf paramiko-1.15.1.tar.gz

# cd paramiko-1.15.1

# python setup.py install

 

(8). simplejson模块安装https://pypi.python.org/packages/source/s/simplejson/simplejson-3.6.5.tar.gz

# tar xvzf simplejson-3.6.5.tar.gz

# cd simplejson-3.6.5

# python setup.py install

 

(9). ansible安装

https://github.com/ansible/ansible/archive/v1.7.2.tar.gz

# tar xvzf ansible-1.7.2.tar.gz

# cd ansible-1.7.2

# python setup.py install

 

2.    Ansible配置

(1). SSH免密钥登录设置

## 生成公钥/私钥

# ssh-keygen -t rsa -P ''

## 写入信任文件（将/root/.ssh/id_rsa_test.pub分发到其他服务器，并在所有服务器上执行如下指令）：

# cat /root/.ssh/id_rsa_test.pub >> /root/.ssh/authorized_keys

# chmod 600 /root/.ssh/authorized_keys

 

(2). ansible配置

# mkdir -p /etc/ansible

# cp ansible-1.7.2/examples/ansible.cfg/etc/ansible/ansible.cfg

# vim /etc/ansible/ansible.cfg

……

private_key_file = /root/.ssh/id_rsa_test

……

## 主机组定义

# vim /etc/ansible/hosts

[storm_cluster]

10.0.2.21

10.0.2.22

10.0.2.23

10.0.2.24

10.0.2.25

 

## 关闭SElinux

# setenforce 0

(3). 简单测试

# ansible storm_cluster -m command -a 'uptime'

说明：第一次运行时，需要输入一下“yes”【进行公钥验证】，后续无需再次输入。

 

## 再次运行

# ansiblestorm_cluster -m command -a 'uptime'

 

3.    常用模块使用

(1). setup

## 用来查看远程主机的一些基本信息

# ansible storm_cluster -m setup

 

(2). ping

## 用来测试远程主机的运行状态

# ansible storm_cluster -m ping 

(3). file

## 设置文件的属性

相关选项如下：

force：需要在两种情况下强制创建软链接，一种是源文件不存在，但之后会建立的情况下；另一种是目标软链接已存在，需要先取消之前的软链，然后创建新的软链，有两个选项：yes|no

group：定义文件/目录的属组

mode：定义文件/目录的权限

owner：定义文件/目录的属主

path：必选项，定义文件/目录的路径

recurse：递归设置文件的属性，只对目录有效

src：被链接的源文件路径，只应用于state=link的情况

dest：被链接到的路径，只应用于state=link的情况

state：

directory：如果目录不存在，就创建目录

file：即使文件不存在，也不会被创建 

link：创建软链接

hard：创建硬链接

touch：如果文件不存在，则会创建一个新的文件，如果文件或目录已存在，则更新其最后修改时间

absent：删除目录、文件或者取消链接文件

 

示例：

## 远程文件符号链接创建

# ansible storm_cluster -m file -a"src=/etc/resolv.conf dest=/tmp/resolv.conf state=link" 

## 远程文件信息查看

# ansible storm_cluster -m command -a "ls –al/tmp/resolv.conf"

## 远程文件符号链接删除

# ansible storm_cluster -m file -a"path=/tmp/resolv.conf state=absent"

## 远程文件信息查看

# ansible storm_cluster -m command -a "ls -al/tmp/resolv.conf"

说明：如上显示，代表文件或链接已经删除。

(4). copy

## 复制文件到远程主机

相关选项如下：

backup：在覆盖之前，将源文件备份，备份文件包含时间信息。有两个选项：yes|no

content：用于替代“src”，可以直接设定指定文件的值

dest：必选项。要将源文件复制到的远程主机的绝对路径，如果源文件是一个目录，那么该路径也必须是个目录

directory_mode：递归设定目录的权限，默认为系统默认权限

force：如果目标主机包含该文件，但内容不同，如果设置为yes，则强制覆盖，如果为no，则只有当目标主机的目标位置不存在该文件时，才复制。默认为yes

others：所有的file模块里的选项都可以在这里使用

src：被复制到远程主机的本地文件，可以是绝对路径，也可以是相对路径。如果路径是一个目录，它将递归复制。在这种情况下，如果路径使用“/”来结尾，则只复制目录里的内容，如果没有使用“/”来结尾，则包含目录在内的整个内容全部复制，类似于rsync。

 

示例：

## 将本地文件“/etc/ansible/ansible.cfg”复制到远程服务器

# ansible storm_cluster -m copy -a"src=/etc/ansible/ansible.cfg dest=/tmp/ansible.cfg owner=root group=rootmode=0644"

出现以上错误需要将SELinux整个关掉才行 

## 远程文件信息查看

# ansible storm_cluster -m command -a "ls -al/tmp/ansible.cfg"

(5). command

## 在远程主机上执行命令

相关选项如下：

creates：一个文件名，当该文件存在，则该命令不执行

free_form：要执行的linux指令

chdir：在执行指令之前，先切换到该目录

removes：一个文件名，当该文件不存在，则该选项不执行

executable：切换shell来执行指令，该执行路径必须是一个绝对路径

 

示例：

# ansible storm_cluster -m command -a "uptime"

(6). shell

## 切换到某个shell执行指定的指令，参数与command相同。

与command不同的是，此模块可以支持命令管道，同时还有另一个模块也具备此功能：raw

 

示例：

## 先在本地创建一个SHELL脚本

# vim /tmp/test_shell.sh

#!/bin/sh

date +%F_%H:%M:%S

 

#chmod +x /tmp/test_shell.sh

 

## 将创建的脚本文件分发到远程

# ansible storm_cluster -m copy -a"src=/tmp/rocketzhang_test.sh dest=/tmp/test_shell.sh owner=rootgroup=root mode=0755"

 

## 远程执行

# ansible storm_cluster -m shell -a "/tmp/test_shell.sh"

(7). 更多模块

其他常用模块，比如：service、cron、yum、synchronize就不一一例举，可以结合自身的系统环境进行测试。

service：系统服务管理

cron：计划任务管理

yum：yum软件包安装管理

synchronize：使用rsync同步文件

user：系统用户管理

group：系统用户组管理

 

4.    Ansible在工作中的使用

(1).  批量执行命令和脚本分发

通过Ansible对数据库设备进行自动拨测脚本分发和创建定时任务。

A、利用ansible的copy模块将本地的源文件或脚本传输到远程主机中；

B、利用ansible的script模块在远程主机运行脚本，使得相关脚本在分发主机中能正常运行；

C、利用ansible的cron模块建立远程机的定时任务。

执行结果：

(2).  批量部署应用

ansible结构

├── hosts

├── roles

│   └── snmp

│       ├── files

│       │  ├── snmpd

│       │  └── snmpd.conf

│       ├── tasks

│       │  ├── copy.yml

│       │  ├── delete.yml

│       │  ├── install.yml

│       │  └── main.yml

│       ├── templates

│       └── main.yml

└── site.yml

hosts：里面是需要更改的机器IP

roles：是规则文件夹，下面可以根据不同的规则定义不同的文件夹，如：snmp

files：存放需要同步到其他机器的文件

tasks：工作脚本

main.yml：主脚本

site.yml：指定hosts和roles的规则文件夹

 

1、main.yml     #主控脚本，下面的4个脚本可以根据自己需求随意变化，主要是把脚本加到这下面才会运行

---

- include: common.yml

- include: copy.yml

- include: install.yml

- include: start.yml

2、commom.yml    #这个脚本主要有5个模块，每个-name即一个模块

- name: Change filesattribute   #更改文件属性

shell: chattr -i {{ item }}

with_items:

- /etc/passwd

- /etc/group

- /etc/shadow

- /etc/gshadow

- name: Create ZabbixGroup  #创建zabbix组

group: name={{ item }}state=present

with_items:

- zabbix

- name: Create ZabbixUser  #创建zabbix用户

user: name={{ item }}shell=/sbin/nologin group={{ item }}

with_items:

- zabbix

- name: Create Directory andChange Owner  #创建zabbix log文件夹和更改文件所组

file: path={{ item }}state=directory owner=zabbix group=zabbix mode=0700

with_items:

- /var/log/zabbix

- name: Yum package  #安装python和gcc

shell: yum install {{ item }}-y

with_items:

- libselinux-python

- gcc

- python-simplejson

3、copy.yml

- name: Copy zabbix tar fileto remote hosts  #拷贝zabbix安装包

copy: src={{ item }}dest=/usr/local/src

with_items:

- zabbix-3.0.3.tar.gz

- name: Copy zabbix_zgentdfile to remote hosts   #拷贝zabbix_agent管理脚本

copy: src={{ item }}dest=/etc/init.d/

with_items:

- zabbix_agentd

- name: Change fileszabbix_agentd   #赋予脚本可执行权限

shell: chmod +x {{ item }}

with_items:

- /etc/init.d/zabbix_agentd

4、install.yml

- name: Untar zabbix tarfile   #解压zabbix安装包

shell: tar xzf/usr/local/src/zabbix-{{ item }}.tar.gz -C /usr/local/src

with_items:

- 3.0.3

- name: Configure Zabbix andInstall Zabbix Agent  #安装zabbix_agent

shell: cd/usr/local/src/zabbix-{{ item }} && ./configure --enable-agent&& make && make

install

with_items:

- 3.0.3

- name: Copy configurefile   #拷贝zabbix_agent配置文件

template:src=zabbix_agentd.conf dest=/usr/local/etc/zabbix_agentd.conf owner=zabbixgroup=zabbix

- name: Configurerc.local   #配置rc.local开机自启

shell: echo"/etc/init.d/zabbix_agentd restart" >>/etc/rc.d/rc.local

- name: Set User Zabbix canread files   #配置zabbix用户只读文件

shell: chattr -i {{ item }}&& setfacl -m u:zabbix:rx {{ item }} && chattr +i {{ item }}

with_items:

- /etc/hosts.deny

- /etc/hosts.allow

- /etc/ssh/sshd_config

- /root/.ssh/authorized_keys

- /etc/passwd

- /etc/group

- /etc/shadow

- /etc/gshadow

5、start.yml

- name: Start Zabbix Agentdaemon   #启动zabbix_agent

shell: zabbix_agentd