中移动的这三波操作,正式宣告分布式存储未来已来
Posted 全球存储观察
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了中移动的这三波操作,正式宣告分布式存储未来已来相关的知识,希望对你有一定的参考价值。
看存储须要眼观全球 存储圈专业号
点击题目下方蓝字关注 全球存储观察
数据存储的每一次技术进步,都离不开行业标杆企业的模范带头作用。
——题记
中国移动在存储创新技术上的实践与应用,照亮了中国存储厂商在分布式存储技术上的未来之路。
从2017年到2019年,中国移动连续进行了三次重要的分布式存储项目集采,分布式存储已经成为了中国移动在业务创新与技术创新上的重要选择。特别是在2019-2020年分布式块存储产品集中采购项目中,中国存储厂商如浪潮、华为等多家供应商入围,其中浪潮成为了中国移动分布式块存储集中采购第一标段的最大赢家。
该项目开标初期有十几个厂商参与投标,充分显示了中国移动在分布式存储技术选择上的行业影响力与号召力。
与此同时,该项目也成为了运营商在分布式块存储应用采购上的标杆。在创新技术的推进上,往往标杆用户的带头作用非常重要,不仅可以带来行业的引导作用,而且可以使得重要的技术产品供应商得到真正的应用锤炼。
事实上,在存储领域,技术创新与行业应用永远是相辅相成的两股动力,共同推动着中国存储产业的创新与进步。
当然了,中国移动的分布式存储之路,必将引发行业更大的关注与讨论,会让分布式存储技术在助力运营商业务转型中发挥出前所未有的价值。
因此,中国移动的这个历史性大单,也将预示着分布式存储的未来已来。
新数据时代,我们的数据存储靠它了
有着中国移动这样规模型用户对分布式存储的器重,虽然只是代表着电信运营商行业的发展情况,但是也让大家看清了一个事实,那就是新数据时代已经到来了。
来自企业用户自身的变化,特别是企业数字化转型进程不断加速,物理世界与虚拟世界正在融合。当两个世界不断以数据的形式互相映射和影响的时候,时代将从量变积累到质变。
就此,在IDC与浪潮联合发布的《2019数据及存储发展研究报告》中,宣布中国迈入新数据时代元年。
新数据时代到底有什么不一样,为什么分布式存储将成为我们最有价值的数据存储的方向?
《2019数据及存储发展研究报告》通过对金融、交通、电信、能源、医疗等行业的研究,得出了新数据时代下数据呈现出海量、多元、实时、多云的四大新数据特征。
一是,海量数据的不断涌现,到2025年全球新创建的数据将达到175ZB。
二是,企业对实时数据需求增加,到2023年实时数据占全球数据圈24.5%的份额。金融的风险评估、交通的自动驾驶、运营商的智能网络等许多场景,都需要依赖快速实时的数据采集、存储和分析得以实现。
三是,数据从单一内部小数据形态向多元动态大数据发展,数据环境多样、复杂,大量文本、图片、视频等非结构化数据被产生和存储。
四是,未来全球将有超过70%的企业选择多云部署模式,到2023年42.4%的企业将采用边缘+核心的组合架构,核心数据中心的数据存储容量占比将超过50%。
新数据时代的挑战无处不在,这一切都是数据变化带来的结果。能够真正应战并为企业用户带来更加匹配的数据存储平台,当属分布式存储。
从架构上来分析,分布式存储系统采用可扩展的架构,不仅能提高存储的效率和数据的安全性,还可以进行性能和容量的横向扩展,解决大规模、高并发场景下的存储访问问题。
从应用上来看看,随着5G、物联网和人工智能的快速发展,企业对于分布式系统的需求将持续增加,分布式存储成为多云环境的首选平台。到2023年,40%的存储系统将是分布式存储架构,大势所趋,势不可挡。
毫不夸张地说,新数据时代,我们的数据存储平台主要靠它了。
空口无凭,以事实为证。在分布式存储领域的技术创新与发展上,浪潮不仅成为中国移动分布式块存储历史最大单的核心供应商,并且也是中国移动在分布式存储领域的三次重要集采中均得以入围的三家供应商之一。同时在交通、科研、医疗、广电、能源等多个行业遍地开花结果,获得了广泛的部署与应用。
在交通行业,针对国家九大中心城市之一的成都,成都交管部门构建智慧交通的思路走在了业界的前列。以成都三环路为例,浪潮提供了以分布式存储平台AS13000为核心的存储解决方案,以极致容量、极致性能和极易管理的方案特性解决数据海量、多样性和实时分析的智慧交通管控应用挑战。浪潮分布式存储支撑了其超过6000路摄像头的视频流,每天1亿文件写入和10亿次查询,智能交通管理效率提升500%。为此,成都市的交通出行效率得到了极大的提升,实现了交通管理决策科学化。
在科研领域,清华大学RUSH脑成像项目对数字化、智能化的应用实践有着很高的要求。脑成像捕捉与连续拍摄等前端应用,在向视场范围更宽、分辨能力更高、成像速度更快发展的同时,对海量数据的处理、管理、运维提出极致要求。浪潮分布式存储架构助力清华大学RUSH脑成像项目,同时运用智能运维技术,为中国脑研究提供数据处理支撑。最终该项目实现了每秒100.8亿像素、72小时连续写入不丢帧,以及对故障、性能和容量的提前预测。
在医疗行业,南华大学附属第二医院借助浪潮分布式存储加速医疗诊断,因为医院业务的创新与组合,其底层存储系统需要提升小文件处理性能,提供更快的响应速度。在部署浪潮分布式存储 AS13000 之后,南华附二医院 3D PACS 系统海量小文件的并发读写问题得以迎刃而解,实测的访问延迟小于1毫秒,即使是在业务高峰期,3D PACS影像系统也能够流畅、稳定运行。而且,由于浪潮 AS13000 具备线性扩展能力,因此医院可以在业务数据增长的过程中,敏捷地通过增加存储节点,来实现容量、性能的扩展。浪潮分布式存储很好地满足了这些具体需求,在保障医院的业务与数据价值的同时,也助力医院实现了日常工作的高效率。
其次,武汉大学中南医院的医疗存储项目还是颇有挑战。要求存储底座必须能承接全院网络云盘、PACS医疗影像、心电图三大业务。因为医院业务的特点,心电与PACS医疗影像数据均为512KB以下的小文件,批量小文件同时要求低时延。同时医院医疗数据呈爆发式增长,单业务月增量约20TB,因而必须满足在线平滑扩容且扩容时不影响业务。为此,以浪潮分布式块存储为数据存储平台,无缝承接医院三大业务,在性能、效率、弹性扩容、单卷实时监控等方面都得到了很好的满足。
在广电行业,针对中国广电国网云平台的创新,浪潮提供的存储平台打通其底层分布式存储、虚拟化、OpenStack、云管平台,外部实现与网络SDN、云安全等平台对接,助力广电国网的三地互联互通和大规模业务支撑目标。因而这对于浪潮分布式存储多协议支持的技术优势,有了实地大规模的检验,也切实帮助广电国网云平台实现多云环境下存储可用性和持久化的提升。
在能源行业中,借助数据技术提高石油勘探的效率成为推动石油行业增长的关键。存储作为数据的载体,成为石油勘探企业转型增效的核心竞争力。浪潮存储为某石油勘探公司构建了16节点、总容量4.2PB的分布式存储平台,以平均写性能27.4GB/s、读性能30.55GB/s的极速性能,大幅缩短了石油勘探数据处理的周期,成为采用数字化、智能化技术提升能源行业业务效率的典型。同时,浪潮存储专业的测试、研发、服务团队,为该能源行业用户提供了贴身的支持。
显然,事实胜于雄辩。在新数据时代,浪潮分布式存储平台AS13000已经成为了众多行业的数据存储基础设施的好选择。新数据时代的用户数据存储需求特点,给分布式存储带来最佳的发展机会,也进一步表明分布式存储成为了企业数字化进程中重要的历史性选择。
担当历史重任,浪潮分布式存储平台AS13000大有可为
新数据时代的企业用户数据存储需求,给分布式存储带来了切实的发展机会。
通过在交通、科研、医疗、广电、能源等百行百业中的锤炼,担当历史重任的浪潮分布式存储平台AS13000大有可为。分析其中的原因,不外乎产品与技术过硬。
众所周知,在中国市场上,分布式存储相关的供应商也不少,但浪潮在分布式存储领域的旗舰型系列产品AS13000有着在容量、性能、管理、服务上的综合优势,进而赢得了最佳的发展机会。
在容量方面,分布式存储以其弹性扩展的显著优势而著称,实现企业用户极致容量的PB级、EB级需求。如前文所述的成都交管部门指挥交通的案例,基于100余节点、20个PB的分布式存储平台,浪潮分布式存储承载起成都智慧交通一体化交通管控建设。
在性能方面,没有最高只有更高。就如浪潮分布式块存储可以赢得中国移动2019-2020年分布式块存储产品集中采购项目第一标段70%的份额一样,对于中国移动来说,容量的满足是必须的,性能的满足也同样是必须的。
浪潮分布式存储在场景化定制上,本着一套代码与架构的定位,有着天然的优势。通过内核客户端优化、对象聚合、高速缓存、读写锁优化、分级存储等技术创新,结合不同行业用户的不同业务阶段的IO负载需求,进行深度优化,从而实现了分布式存储性能上的最佳表现。
对于容量与性能的满足,企业用户始终是走在了众多厂商的前面。然而,在一次能源行业用户的招标项目中,经过长达半个月的13次系统级测试,浪潮16个节点的分布式存储平台平均写性能达到27.4GB/s,平均读性能达到30.55GB/s,容量和性能远远超出了某石油勘探公司的招标项目要求。更高的性能意味着,浪潮分布式存储平台可以帮助石油勘探项目缩短勘探开发周期、提高勘探开发成功率。技术进步成为企业用户业务进步的推进力,在这里浪潮存储以其性能、容量的显著优势而做到了。
在管理的智能方面,现在的人工智能技术无处不在,也在快速融入存储系统的发展,并在存储容量、性能、硬盘故障预测方面起到关键作用。《2019数据及存储发展研究报告》指出,全新的存储系统应该部署智能、统一的管理平台,对分布式多节点进行集中管理,并利用人工智能技术进行智能监测、故障预测等管理,从而简化运维。浪潮分布式存储由此而为存储的运维带来了创新,帮助企业用户的技术运维人员提升了效率,减少了手工操作。智慧运维的实现,也就进一步提升了存储管理带给企业用户的实际价值。
在产品、技术、管理与服务上,浪潮分布式存储有着过硬的全面能力,满足新数据时代下的企业用户在文件、块、对象、大数据、多云等不同应用环境的多元化需求。
在支撑行业的领先应用方面,以应用需求作为分布式存储发展的第一位,将用户的业务创新视为第一要务,由此而言,可以长期促进浪潮分布式存储实现植根用户需求的创新。重任在肩,一往无前。
更全面的融合,将成为分布式存储的大趋势
在这之前,分布式存储可以简单地分为针对文件、块、对象类型的存储,然而大数据、人工智能等新兴业务需求带来的挑战,不仅需要这些类型的存储支持,同时还需要更多存储服务的支持。
小结:未来已来,就此出发
以上是关于中移动的这三波操作,正式宣告分布式存储未来已来的主要内容,如果未能解决你的问题,请参考以下文章
第4届 未来已来!星际文件分布式存储助力“新基建”研讨会圆满举办!