转帖赤壁之战，曹操大败只因缺了Service Mesh

Posted 2020-11-10 jinanxiaolaohu

赤壁之战，曹操大败只因缺了Service Mesh

本文作者把微服务向 Service Mesh 的进化融入到了三国故事中，妙趣横生。故事比较长，大家慢慢看，精彩的在后边。

http://developer.51cto.com/art/201907/599484.htm

 

本文作者把微服务向 Service Mesh 的进化融入到了三国故事中，妙趣横生。故事比较长，大家慢慢看，精彩的在后边。

话说曹操官渡之战大获全胜，收编了袁绍的大批将士和军队，有搞 Python的，有搞 JS 的，有搞 Ruby 的，有搞 C++ 的，还有搞 php 的，不一而足。

浩浩荡荡，号称百万大军，正向东边来袭。

刘备率领自己的 Java 大军，哦不，其实也就万人不到，一边抵御一边向东逃去。

刘备：“曹操大军压进，如何是好啊?”

诸葛亮：“主公不必多虑，我等可投奔东吴。”

刘备：“他们岂肯逆曹而收留我们?”

诸葛亮：“亮自有妙计，且听我慢慢道来。”

诸葛亮：“东吴世代熟悉水战，创始人孙坚，一直使用 Go 语言，其儿孙策继承父志，搞出了 Docker。现在孙策之弟孙权在位，我们可以说服他联合抗曹。”

刘备：“talk is cheap，你先带赵云去东吴游说，我们带着军队随后就到。”

01 东吴

诸葛亮来到东吴，说明了来意。

诸葛亮：“曹操正率百万大军向东吴进攻，目前形势危急，我主刘备欲助东吴一起抗曹”。

张昭：“主公，万万不可听信此人，曹操明明是要进攻刘备，与我东吴何干?”

诸葛亮：“此言差矣，如果我主刘备被灭，东吴离灭亡还会远吗?”

张昭：“你说你来帮我们一起抗曹，但是你们自己兵力微弱，被曹操打得节节败退，又如何帮我们?”

诸葛亮：“我主自幼苦练 Java，又有关羽张飞赵云等良将，最近我又在研究微服务兵法，配合东吴 Docker 可以发挥最大的效能。”

张昭：“什么乱七八糟的，无非是想借我们的兵力而已。”

见两人在朝堂上吵吵闹闹，孙权一时头疼：“汝等暂且退下，容我三思。”

孙权回到房间，马上下诏书让周瑜回来。

02 周瑜

周瑜回来见过孙权：“主公，事情我都听说了，我也是主张抗曹。”

孙权：“哦?你有把握吗?”

周瑜：“我一直在训练 Docker 水军，战斗力已经 Max，只是我要见那诸葛亮一见”。

说完，周瑜向诸葛亮的住处奔去。

诸葛亮早已正装等候。

周瑜：“诸葛先生，你的好意我心领了，但是你也知道，你军不到一万，加上我军也不到五万，如何抵抗曹操百万大军?”

诸葛亮：“曹操百万大军看似很多，其实都是纸老虎。你想，曹军大部分都是收编其他势力，比较杂乱，什么 Python、JS、PHP、Ruby、C++，这些人在一起，相互之间无法配合，战斗力要大打折扣的。”

周瑜见诸葛亮一言就说到了要害，知道此人并不简单，决定继续试探。

周瑜：“汝可有良策?”

诸葛亮也不虚：“不如你我各自在手心写下计策，同时打开?”

周瑜一听，觉得有点意思，便拿笔在手心写下一字，诸葛亮也在手心写下一字。写完，两人头碰头，同时打开手心。

只见两人写下的是同一个字，“船”!

周瑜：“我以为你会写火。”

诸葛亮哈哈大笑：“我也以为你会写火”。

看到了吗，英雄的想法总是相似的，无论他们多么想与对方不一样。

两人彻夜长谈，共同商定抗曹方案，从微服务谈到服务降级，限流，最后到 Docker 部署，制定了周详的作战计划。

计划制定完毕，两人作了最后一次模拟演练，演练过程中，这二人竟然有一种惺惺相惜的感觉。

天亮了，周瑜离开了诸葛亮的住处，路上，他心思极重：“诸葛亮真乃旷世奇才，可惜和我各事其主，此人必不可久留。”

话分两头说，曹操这边倒是正在发愁。

03 曹营

曹操：“我虽有百万大军，但是大部分是北方人士，到这东吴水土不服，特别是在水上作战，不像在陆地这般平稳，大批将士一到水上就脑袋发晕，这可如何是好呀?”

谋士荀彧率先开口：“主公所言极是，依我看来，咱们的部队兵力过于分散，搞 Python 的、搞 PHP 的、搞 Ruby 的、搞 JS 的、搞 C++ 的，就像一片大海中的五个孤岛一样，无法联合作战啊。”

曹操：“爱卿所言正是我之担忧，我扩张太快，内部尚未磨合好，战斗力怕是要打些折扣啊。汝等有何良策?”

谋士程昱说道：“主公可听说过万能的重写?”

曹操：“这是何意?”

程昱：“我们可以选择一种语言，比如 PHP，将其他语言实现的系统全部用这种语言重写一遍。这样大家都用一种语言，相互之间能够紧密配合。”

曹操：“这需要多长时间才能完成?”

程昱：“大概需要两年时间。”

曹操：“这可不行啊，兵贵神速，等上两年时间，那刘备和孙权都不知道能发展成什么样了。”

正在这时，曹营中一个声音说道：“我有一计，可以不用重写系统。”

①庞统

曹操寻声望去，只见坐下一人，样貌极丑，却一副胸有成竹的样子。

曹操：“哦?你说说看!”

庞统上前说到：“主公可听说过 RPC?”

曹操：“RPC?什么东西?”

庞统：“就是远程过程调用的意思，虽然每个系统实现的语言不一样，但是只要遵循某种协议对外提供接口，比如都对外提供 HTTP 的接口，它们便可以相互调用。”

曹操：“这样就不用重写系统?来，你来给我详细说说。”

庞统：“比如那用 Ruby 写的系统，将自身能够提供的服务用 HTTP 接口封装一层，用 PHP 写的系统只需要发起一个 HTTP 的请求，便可以调用那 Ruby 系统提供的服务了。”

曹操：“嗯，明白了，这样改造需要多长时间?”

庞统：“因为不用重写，业务代码也不用大改，只需要用 HTTP 将某些服务包装，不出一周便能完成。”

曹操一听大喜：“行，就按照你的方案来，你来实施吧。”

庞统带领曹操的将士们对系统进行了改造，让原本割裂的五个不同语言的系统相互依赖，全部连了起来，完美地实现了曹操所需要的所有功能。

改罢，庞统暗自欣喜：“连环计已经完成，我现在该赶紧逃离曹营了。”

庞统想要坐筏渡江，只听后面有人拍了他的肩膀：“汝献此计策，不怕项上人头不保吗?”

②徐庶

庞统一听计策被识破，大惊失色，回头一看，原来是徐庶，提到嗓子眼的心又放了下来：“哎呀，元直兄，你这样吓人可不好啊，我心脏病都快被你吓出来了。”

这徐庶正是向刘备间接推荐诸葛亮之人，只是母亲被曹操控制，不得已而在曹营，发誓终生不为曹操献一计。

徐庶：“基于远程调用的分布式系统，我很早就在研究，这里面的复杂度可是单机程序所不能比拟的。”

庞统：“哦?愿闻其详。”

徐庶：“首先你要考虑被调用方挂了怎么办，要做限流和降级方案，还要考虑调用的负载均衡问题，还有服务的自动注册和发现，要有注册中心。你现在只是带领将士们实现了功能，根本没有考虑系统的稳定性和容灾情况，这不是把曹操往火坑里推?”

庞统一听哈哈大笑：“不愧是元直兄，不过老板们只要实现功能就行，谁会管什么容灾和稳定性?”

徐庶：“看来曹操天数将尽，你走吧，就当没见过我。”

庞统坐上竹筏往东吴而去。

04 开战

月黑风高，长江上的浪花拍打着两岸，发出巨大的声响。江岸两边，曹操与周瑜隔江相对。就在今晚，曹操向孙刘发起了总攻，而周瑜也早已做好了战斗准备。

不远处，诸葛亮登上了七星台，与周瑜遥相呼应，相互配合。

曹操一声令下：“全军出击”。

百万大军驾驶着一艘战舰，朝周瑜这边驶来。

而那周瑜，只有区区十几艘小船，与那战舰一比，就像蚂蚁和大象。

曹操巨大的战舰向周瑜发动着猛烈的攻击。而那周瑜却不慌不忙，一面命令将士们顶住火力，另一面，暗中观察曹操那巨型战舰的火力分布。

他在寻找系统弱点。

突然，他发现曹操战舰的东北 45 度角火力有点慢，不像其他地方那么猛烈，一个火力开回比其他地方慢了 50ms。

是的，就是这转瞬即逝的 50ms，也瞒不过天才都督周瑜，他一声令下：“集火。”

由于周瑜的系统是基于微服务设计的，每个微服务都可以独立缩扩容。而系统又是用 Docker 部署。

周瑜军队需要做的就是将其他系统的 Docker 容器关闭，然后启动进攻东北 45 度的 Docker 容器。

两条命令，整个过程不超过半分钟。

05 逆转

半分钟后，周瑜军队完成了集火的操作，曹操战舰的东北 45 度火力模块突然遭受了巨大流量火力冲击，瞬间挂掉了。

这一挂不要紧，关键是系统其他模块都依赖于这个东北 45 度火力模块，结果很多模块都无法正常工作了，整艘战舰，只有很少的几个点还能输出，其他火力全都哑了。

那东北 45 度区是用 Python 写的，负责他的人正是曹军大将张辽。

张辽一看模块挂了，赶紧下令：“重启!重启这个模块!”

但是重启了之后，这个模块依然扛不住周瑜全军的火力，起来又挂了。

张辽：“不行了，必须要扩容，西北 45 度区夏侯敦那边没有火力，赶紧去那边调十台机器来扩容。”

那西北 45 度区是用 NodeJS 写的，首领夏侯敦收到张辽的救援请求，马上调拨了十台机器给张辽。

但是要在这新的十台机器上部署 Python 模块谈何容易，张辽部队全部上了，都在手动部署，装 Python 环境，设置环境变量，拷贝代码，设置配置文件，这一套流程下来，十几分钟过去了。

结果要启动的时候，报错，Python 依赖的一个系统库与之前 NodeJS 用的一个系统库冲突。

这下张辽是真的慌了：“重装，赶紧重装系统!”

嗯，整艘战舰的人都等着张辽在这重装系统，然后再装 Python 环境，设置环境变量，拷贝代码，设置配置文件。

06 曹操

曹操觉得此次胜利在握，正在战舰的监控室里一边喝酒，一边绣着十字绣。只见快一个小时了，十字绣已经绣了一半，还没有传来胜利的消息，便问身边人：“怎么还没有灭了周瑜?”

那身边人也是个欺上瞒下的主：“主公不必惊慌，咱们系统有一个小模块出了点问题，应该没有大碍。”

曹操：“我系统大大小小几十个模块，一个模块出问题算什么?”

他哪里知道，自己的系统早已被庞统全部连了起来，由于级联的效应，一个模块挂掉，已经足矣让整个系统 80% 功能不可用。

07 破曹

张辽这边还在重装系统，周瑜的火力已经透过那东北 45 度火力模块打到了系统缓存层，缓存层很快出现了热点，一下子战舰着起了火，缓存层很快被击穿了，火力到达了数据库，数据库瞬间挂掉了。

张辽见情势不妙，赶紧连滚带爬去监控室里找曹操，只见曹操还在那优哉游哉喝着小酒，绣着十字绣。

张辽大喊：“主公，求求你别绣了。周瑜的火力已经打过来了，赶紧从后门逃走吧。”

曹操一开始还不相信，但见那火势很快烧到了监控室，自己只能带着将士们连滚带爬逃出战舰，朝那华容小道逃去。

周瑜登上曹操的战舰，没有寻得曹操，将士们都准备追击，周瑜却不慌不忙：“别忙着追那曹操，你们赶紧去那七星台，把诸葛亮先给我软禁起来。”

将士们来到七星台，只见台上早已空无一人，诸葛亮已经离开了东吴。

赤壁之战惊天大逆转，微服务加 Docker 战胜了耦合严重的曹军战舰，曹操会这样善罢甘休吗?

08 复盘

曹操自从赤壁之战大败之后，一蹶不振，本来的绝对优势变成了天下三分的局势。

曹操有个习惯，每次吃了败战，都要面壁思过一段时间。吃了这么大一个败战，曹操已经面壁思过了一年时间。

一年后的今天，曹操准备好 PPT，想着召集众将士们一起复盘。

曹操：“一年，一年了，我没有发动过战争，就是因为赤壁之战对我的打击太大。”

众将士不语。

曹操：“若郭奉孝在，不使我至此啊!”

郭奉孝名郭嘉，是曹操军中第零大谋士，可惜天天 996，身体不好，赤壁之战前就病逝了。

众谋士听闻，都羞愧难当。

曹操：“你们谁能说说，赤壁之战失败的根因是什么?”

谋士荀彧先发言：“依我看都怪那庞统，献个什么连环计，把我们系统改得乱七八糟，没有考虑稳定性和容灾情况，才导致一个模块挂了，整个系统都挂了。”

曹操：“庞统何在?”

程昱：“庞统早已离职。”

曹操恨那庞统也是恨得牙痒痒，这种 Low 逼谋士，技术渣，上来胡乱在系统里写些垃圾代码，把系统搞臭了就离职。

但是回头想想，也是自己先同意了让庞统去做改造，自己也有不可推卸的责任。

曹操：“还有其他原因吗?”

武将张辽也发言：“我们系统要缩扩容非常麻烦，要手动重装系统，再装环境。”

曹操：“其他人不也一样吗?”

荀彧：“非也，我听说那周瑜，用的是什么 Docker，系统缩扩容半分钟就完成了，所以才导致我东北 45 度火力模块瞬间被集火挂掉。”

曹操一听，原来还有这段战况，开始后悔自己不应该盲目自信，坐在监控室里喝酒，他把那绣到一半的十字绣扔进了垃圾桶：“以后我再也不绣了。”

曹操：“我这一年来一直在反思，庞统那厮提出把系统改成分布式，用 RPC 互相调用，这并没有什么错，只是没考虑系统稳定性和容灾能力，例如网络不通，负载均衡，限流降级，服务发现等等才致此大败。我也有个疑问，为什么孙刘那边把容灾做得这么好呢!”

这时座下一人大喜：“时机已到!”

他站起身来：“这主要是因为刘备那里用的是 Java，有很多‘限流降级‘，‘服务发现‘的系统可以直接使用。比如著名的 Hystrix。”

09 司马懿

站起来这位不是别人，正是曹营第一大谋士，与那郭嘉齐名的司马懿。

曹操：“那我们也可以拿过来用啊!”

司马懿：“主公，现在是不可能的，因为这些工具和 Library 很多都是用 Java 语言写的，和微服务密切绑定。”

司马懿一边说一边展示了一张图：

曹操立刻明白了：“这些微服务所依赖的库实际上和服务本身有了深度绑定，而我们有五种语言，每个语言都去实现一遍同样的工具和库，不但需要两三年时间，还是巨大的重复和浪费啊!”

司马懿道：“这些能力确实是每个服务都需要，但是并不需要每种语言都去实现这些能力。”

曹操和众臣表示不解。

司马懿开始放大招：“我们需要一个思维的升级，大家想想，这些微服务系统需要的特性其实是公共的，为什么不能把这些公共的特性做到底层平台中呢?想想看，我们做一个 HTTP 调用并不需要理解 TCP 的细节，那里边可是有流量控制，失败重传啊。”

荀彧恍然大悟：“软件业的所有问题果然是可以通过增加一个中间层来解决啊!”

曹操瞪了荀彧他一眼，这种总结的台词通常都是我来说的。

不过曹操老谋深算：“你能修改网络协议栈，来增加一个层来实现这些限流降级和服务发现的功能吗?”

司马懿道：“主公明鉴，确实不能，所以我们得改用代理的模式，服务本身不直接连接到其他的服务，而是将所有的流量导送到一个小的代理，由代理来实现需要的特性。这个代理是通用的，所以我们可以用各种语言写微服务了。”

注：这个代理被称为 Sidecar，即边车，摩托车旁边的那个座位

10 Service Mesh

司马懿：“我们的微服务都可以使用这种模式，这样就组成了一个网格，就是 Service Mesh。”

司马懿：请看看上图，浅蓝色部分代表咱们现在各个语言的业务模块，灰色部分代表代理(Sidecar)，你可以看到，业务模块只和自己的代理通信，而真正实现相互之间通信的是代理。

程昱：“哦，我明白了，这倒是一种方法。那么实现 Service Mesh 需要多长时间呢?”

司马懿：“不用自己造轮子了，现在已经有一些现成的方案，比如 Istio。”

曹操一听大喜：“行，就按照你说的来改造，但是这次改造完成，我们要执行严格的灾难测试。”

司马懿将代码回滚到庞统来之前，然后改造系统，把系统搭在了 K8S 之上，用上了 Istio，整个系统改造花了不到半年时间。

11 测试

系统改造完毕，曹操安排了张辽对系统进行灾难测试，主要就是把一些模块搞挂。

而那 Service Mesh+K8S 搭载的系统，已经完全能够承受这种级别的灾难了。

曹操看到测试结果以后大喜，在铜雀台摆上了酒席宴请众将士。

曹操：“来，把甄姬叫来给大家跳个舞。”

众将士都沉浸在甄姬美妙的舞蹈当中，而曹操心里却已经盘算着如何灭掉孙刘。

参考文章：

https://philcalcado.com/2017/08/03/pattern_service_mesh.html