使用ARM模板在Azure中国大规模部署DCOS集群
Posted StevenLian
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了使用ARM模板在Azure中国大规模部署DCOS集群相关的知识,希望对你有一定的参考价值。
容器技术是目前非常流行的技术,尤其是在以Docker作为容器引擎的推动下,让容器的轻量级,可移植,自包含,隔离性等的上了一个新的台阶,目前谈及Dev/Ops,CI/CD很少能够绕过Docker的。
Azure在去年就推出了容器服务ACS,以其对开源的全面兼容性,开放性,最全面的编排器(DC/OS, Kubernetes,Swarm)支持而广受好评,但在中国和很多地区,ACS并没有上线,如何在这些地区快速大规模部署容器服务一直是个问题。
而微软更进一步,在11月初,进一步开源了ACS的核心引擎acs-engine,让开发人员可以通过acs-engine快速的生成可以在所有地区当然包括中国部署的ARM模板,并且并不依赖于ACS Container resource provider,对于广大开发和维护人员来说是一大喜讯,不必像我一样为了在Azure中国上部署DC/OS cluster而辛苦调试修改脚本和ARM模板了:)
新闻:http://www.forbes.com/sites/janakirammsv/2016/11/07/microsoft-open-sources-azure-container-service-adds-support-for-kubernetes/#48e955d270ad
Acs-engine官方地址:https://github.com/Azure/acs-engine
很多牛人已经写了一些非常棒的acs-engine的文章,本文是按照我实际测试整理而成的,将碰到的一些问题,解决办法等记录下来,希望对于大家快速部署有所帮助。
首先简单了解一下本次DC/OS集群的部署架构图,我们有一个master的高可用集,master可以选择1,3,5台虚拟机;有一个public agent的VMSS集合主要部署面向互联网用户访问的应用;一个private agent的VMSS,无法公网访问,运行一些默认的计算:
安装配置acs-engine
wget https://storage.googleapis.com/golang/go1.7.3.linux-amd64.tar.gz
2.Linux下在你的用户目录下建立一个子目录gopath,并且添加如下行到你的$HOME/.profile文件:
export PATH=$PATH:/usr/local/go/bin
export GOPATH=$HOME/gopath
go get github.com/Azure/acs-engine
go get all
从以下地址:
https://dcosio.azureedge.net/dcos/testing/bootstrap
https://az837203.vo.msecnd.net/dcos-deps
下载下面的包到你的中国的镜像服务器:
5b4aa43610c57ee1d60b4aa0751a1fb75824c083.bootstrap.tar.xz(约551M)
docker-engine_1.11.2-0~xenial_amd64.deb
ipset_6.29-1_amd64.deb
libipset3_6.29-1_amd64.deb
libltdl7_2.4.6-0.1_amd64.deb
unzip_6.0-20ubuntu1_amd64.deb
cd $GOPATH/src/github.com/Azure/acs-engine
go build
./acs-engine
"masterProfile": {
"count": 1,
"dnsPrefix": "dcosmaterdemo",
"vmSize": "Standard_D2"
},
{
"name": "agentpublic",
"count": 3,
"vmSize": "Standard_D2",
"dnsPrefix": "dcosagentdemo",
"ports": [
80,
443,
8080
]
}
"publicKeys": [
{
"keyData": "YOURKEY"
}
]
./acs-engine examples/dcos.json
https://dcosio.azureedge.net/dcos/testing/bootstrap
https://az837203.vo.msecnd.net/dcos-deps
#使用Azure CLI登陆中国的Azure:
azure login -u USERNAME -p PASSWORD -e AzureChinaCloud
#创建resource group:
azure group create --name="stevenacsdcosgp" --location="China East"
#执行部署:
azure group deployment create --name="mydcoschinadeploy" --resource-group="stevenacsdcosgp" --template-file="./_output/DCOS184-10726092/azuredeploy.json" --parameters-file="./_output/DCOS184-10726092/azuredeploy.parameters.json"
Auth配置:
Tunnel配置:
TIPS:如果你碰巧很不幸,配置SSH Tunnel的时候,无法链接,检查putty event log,看到Permission Denied错误,我已经找到了解决办法,为节约你的时间,请按照如下方法执行:
检查netstat -aon | findstr "80"
你会看到有一些服务会使用ntoskrnl占用80端口,比如ws-Management导致本地tunnel失败:
从上述文档可以看出,利用acs-engine可以非常方便的生成适用于中国Azure大规模部署的ARM模板,但其实有了这个模板,简单修改参数,就可以重复部署了,没必要每次都生成,所以我把生成好的模板已经放到了Github上,想在中国部署的同学:
https://github.com/kingliantop/azurelabs/tree/master/AzureChinaARMTemplate/mesos-marathon-vmss-china
- 克隆或者下载当前所有文件
- 修改azuredeploy.json中的http://YOURCHINASERVER为你自己的服务器,
- 修改azuredeploy.parameters.json中的所有标为CHANGIT的地方
- 修改deploy.ps1文件中deployName作为你的资源组名称
- 登陆你的Azure账户,使用ARM模式,执行deploy.ps1部署
- Linux和Mac用户也可以使用Azure CLI部署
以上是关于使用ARM模板在Azure中国大规模部署DCOS集群的主要内容,如果未能解决你的问题,请参考以下文章