分布式存储越来越“硬”：软硬一体为什么会渐占上风？

Posted 2021-04-19 老蒋看通信

点击标题下「蓝色微信名」可快速关注            

说好的软件定义存储，变得越来越“硬”了。

近年来，关于分布式存储“软硬解耦”和“软硬一体”两种发展思路的争议不绝于耳，二者也各自拥有一批拥趸。 不过随着时间的推移，似乎后者渐渐占据了上风。 EMC、HDS、华为以及阿里、浪潮、VMware、Azure、XSKY等分布式存储系统供应商均已推出了软硬件结合的一体机产品； 今年一些重要的分布式存储采购比如中国移动块存储和文件存储、咪咕对象存储、招商银行大数据存储、深圳市政务云建设等采购项目中，软硬一体也成为了主流。

软硬解耦与软硬一体的分歧为何产生？ 为什么软硬一体越来越受青睐？ 分布式存储的未来是“合久必分”还是“分久必合”？ 通过与一些专业人士的交流，笔者尝试在此做个简单分析。

分布式存储的前世今生

数字经济的崛起、全行业数字化的加速，令数据成为了新的生产资料，重要性与日俱增； 5G、AI、物联网等新兴数字技术的发展，也带来了数据的指数式增长，IDC预测，到2025年全球数据总量将达到175ZB。 受此驱动，数据基础设施开启了新一轮的升级，存储系统也日益由集中式走向分布式。

而随着分布式存储技术和市场的成熟，最近几年业界对其的关注焦点已由“要不要上”，转向了“哪些场景适合上”、“如何部署”等，采用软硬解耦模式还是软硬一体模式也是众说纷纭。 这个局面的形成，或许可以从分布式存储的发展历程及其背后几股错综复杂的推动力量来解读。

上世纪90年代特别是2000年以后 ， 互联网的蓬勃发展驱动了数据存储领域的变化，谷歌提出并实践了分布式存储的理念 ——基于通用服务器和分布式软件组成大规模分布式集群，应对互联网搜索业务的海量数据。 有了谷歌的应用在前，以及业务高速发展的迫切需求，分布式架构成为了互联网企业存储建设的实际标准。 互联网企业习惯于采购通用硬件，自己开发和维护软件，因此便形成了分布式存储软硬解耦的历史事实。

2010年以后， 传统企业数字化转型带来了海量的数据，企业对分布式存储的需求开始显现。 包括红帽、VMware在内的越来越多软件厂商也开始着眼于存储领域快速增长的市场空间，希望涉足其中获取自己的一块“蛋糕”； 还有不少软件厂商由于自身硬件能力的缺失，沿袭软硬解耦模式以拉低存储产业的进入门槛。 而对芯片与服务器厂商而言，软硬解耦将消耗大量服务器，同时带动对CPU的需求，因此也乐于推动软硬解耦扩大影响。

与此同时，传统存储厂商也推出了一系列分布式存储产品 ，聚焦如何基于分布式架构及软硬一体的能力，来应对企业客户的海量数据挑战，典型的代表如EMC、华为、NetApp等。

由此可见，软硬解耦与软硬一体争议的背后更多是利益使然。

软硬一体因何渐占上风

从分布式存储软硬解耦就是“政治正确”到软硬解耦、软硬一体各执一端，再到如今的软硬一体在厂商阵营、市场份额方面占据上风，背后有着怎样的逻辑？

软硬解耦的建设模式之所以在互联网行业大行其道，很重要的一点就是互联网企业具备较强的技术储备，有能力根据自身需求来开发分布式存储软件，因此单纯采购服务器即可。 而其他行业具备这方面能力的企业寥寥无几，更何况如果不是海量的需求，开发和维护边际成本会非常高。

另一方面，互联网企业本身也都开始发力存储硬件，通过软硬件结合深度优化来构筑差异化竞争力。 比如AWS收购了以色列E8、阿里在云栖大会上推出了名为貔貅的高密存储硬件和泰山全闪存硬件、百度云盘也采用定制的ARM硬件带来可靠性和可维护性的提升。

传统企业在拥抱分布式存储的时候 ，需要的是分布式存储的高扩展性，而不是具体以何种手段来实现 ，软硬一体的产品用起来更加省心省力。 软硬解耦虽然宣称有着避免供应商锁定等种种好处，但本质上相当于将原本由存储厂商完成的软硬件匹配、优化测试等一系列工作转嫁到了企业身上，不仅性能上不如专业存储设备，同时还变相提高了部署、维护的难度，增加了总体拥有成本。

站在存储厂商角度 ，软件与硬件解耦往往因为兼容性问题带来了交付、维护上的不少问题； 同时为了满足通用性需求，无法对硬件进行针对性的优化； 就商务而言，软硬件分开采购、纯软件的价值认同低，导致获得的好处远不及服务器厂商。 软硬一体模式则有利于其提升交付和维护效率、体现性能和可靠性方面的技术优势，以及扩大市场参与空间。 从最近举行的2019年中国存储与数据峰会分布式存储与应用分论坛上也可以看到，如何利用硬件使得分布式存储更高效成为厂商们描述的重点。

分布式存储未来是否会完全倒向软硬一体现在还难下定论，但此消彼长的趋势已经显现。 其实就像那句“不管黑猫白猫，捉到老鼠就是好猫”，不管软硬解耦还是软硬一体，能够满足政企核心诉求、解决海量数据挑战的存储方案就是好方案，你说对吧？ （本文首发C114，详见阅读原文）

通信人、媒体人，自比工匠，略有情怀，关注各种ICT大事、琐事，望与诸位读者君同行。

关注更多精彩