利用Azure高级存储搭建高性能Linux服务器

Posted 2020-08-18

目前Azure针对虚拟机提供两种类型的存储，一种是标准存储，基于HDD的，一种是高性能存储Premium Storage（在下文中简称PS），基于SSD的。针对用户高性能，低延迟，I/O密集型的应用,比如数据库mysql, MongoDB，SAP等提供良好的支持。

本文主要介绍如何在CentOS上使用高级存储构建数据库服务器的最佳实践，包括你的应用需求在超过单盘IOPS限制的情况下，如何通过使用软RAID来构建50000级别的IOPS服务器。

目前高级存储只能用于DS/GS/FS系列机器作为数据磁盘使用，根据虚拟机的大小不同，对每个虚拟机，你最多可以挂载32T的高级存储，达到最高64000的IOPS(受限于你的虚拟机大小和磁盘带宽)。

需要理解的是，磁盘性能取决于三个要素: 磁盘类型、磁盘大小和虚拟机大小。高级磁盘比标准磁盘具有更高的 I/O 限制，I/O 限制随磁盘大小而增加，较大的虚拟机比较小虚拟机具有更高的带宽限制。使用高级磁盘时，请确保虚拟机足够大，能够处理总磁盘带宽。

注意事项

本文中以CentOS 6.7为例，使用DS14作为测试虚拟机，为在CentOS上使用高级存储用做数据库服务器，需要注意一下几项：

1.如果想获得最佳性能和稳定性，在CentOS 6/7上必须手动安装LIS 4.1以上驱动，下载地址如下：

https://www.microsoft.com/en-us/download/details.aspx?id=51612

对于LIS的说明如下：https://www.azure.cn/documentation/articles/storage-premium-storage/

为方便下载，我已经把最新的LIS4.1的包放在了blob storage， Linux下直接wget即可下载：

https://www.azure.cn/documentation/articles/storage-premium-storage/

#安装之前首先保证你的系统最新

$ sudo yum update

请注意：LIS的安装要求你的kernel是最新版本，所以更新之后请重启一下机器确保装载的是最新的Linux kernel，否则后续安装会报错。

#解压缩并安装LIS4

$ tar -xzvf lis-rpms-4.1.2-2.tar.gz

$ sudo ./inshall.sh

可能会有一些警告，忽略即可，安装完成后机器需要重启，以便让新的驱动生效。

[[email protected] LISISO]$ rpm -aq|grep microsoft

kmod-microsoft-hyper-v-4.1.2.2-20161013.x86_64

microsoft-hyper-v-debuginfo-4.1.2.2-20161013.x86_64

microsoft-hyper-v-4.1.2.2-20161013.x86_64

2. 合理使用高级存储的缓存设置：

关于premium高级磁盘缓存设置，你需要根据你的应用的实际情况进行正确设置获得最佳性能：

设置为无：如果你的应用基本都是写入，或者超过80%以上的都是写入操作，则缓存设置为无。

设置为只读：这个选项是Premium Storage的默认选项也是最为常见的选项，如果你的应用操作是读写的，或者只读的操作,建议使用该选项。

设置为读写：如果你的程序可以处理缓存数据，并且在需要的时候可以将缓存数据写入到持久化磁盘，对应用程序有较高要求，处理不当可能会有数据损失。

例如对于SQL Server而言，你可以：

• 将有数据库数据文件的磁盘的缓存设置为只读，获得快速读取和处理性能

• 将日志文件的目录设置为无，因为日志文件基本上以写为主

对于MySQL数据库而言，道理比较类似，你可以将bin log文件设置为一个目录，而将数据文件也单独设置为一个目录，利用缓存获得最佳性能。

3.对于CentOS 6/7用户，你如果你使用的缓存策略是"无"或者"只读"，你必须在挂载磁盘的时候将barrier设为0，具体做法一般是在fstab文件中设置，具体方法见后续例子。

 

4.在设置fstab自动加载的时候，一定要使用UUID，否则某些情况下会出现不可预知的问题；另外，在设置fstab的时候，为避免在某些情况磁盘加载失败而系统无法启动的情况（比如最为常见的UUID写错，配置错误等等）最好加上nobootwait（ubuntu）或者nofail（centos）参数，具体用法见后面例子。

单个P30盘性能测试

1. 创建DS系列的虚拟机，如果你需要更高级别的处理性能的虚拟机，可以创建DS V2系列的虚拟机，V2系列比DS系列的虚拟机处理能力快35%左右,本实例中创建一台DS14系列的虚拟机:

   

    

2. 挂载单个1024大小的P30 SSD磁盘到虚拟机，我们进行单盘的性能测试：

   

    

    

3. 查看添加的磁盘，当前是个裸设备，需要分区并添加：

   $ ls -l /dev/sd*

   $ sudo fdisk /dev/sdc

   

输入n创建新的分区，p选择primary，partition number选择1，其他的选择默认值。

然后输入t，选择partition为1，修改hex code为fd，这个类型代表 Linux raid auto：

 

重复以上步骤，直到新增加的4块盘都分区完成：

4. 我们先用sdc来做个单盘测试，格式化设备，创建目录，挂载分区到测试目录：

$ sudo mkfs -t ext4 /dev/sdc1

$ sudo mkdir /data

$ sudo mount /dev/sdc1 /data

5. 我们使用标准的Linux磁盘测试工具fio来测试一下磁盘的性能,首先我们安装一下fio软件，使用epel的repo来做安装：

$ sudo yum install epel-release

$ sudo yum install fio