大数据概述

Posted 2020-10-26 091梁耀

近年来，“大数据”一词从原本陌生的专业领域一跃进入公众眼帘，并作为时髦的热词写入各级政府工
作报告中。它所掀起新的数据技术革命，正深刻地改变着我们这个时代的生产、工作和生活样式，并推
动着人类认识、理解世界的方式转变。为此，必须全面准确把握大数据所揭示的深刻内涵及其走势，积
极适应大数据风暴带来的思维方式的转变及观念变革。
物联网产生大数据，大数据助力物联网。目前，物联网正在支撑起社会活动和人们生活方式的变革，被
称为继计算机、互联网之后冲击现代社会的第三次信息化发展浪潮。它重点突出了传感器感知的概念，
同时它也具备网络线路传输，信息存储和处理，行业应用接口等功能。而且也往往与互联网共用服务器
，网络线路和应用接口，使人与人，人与物、物与物之间的交流变成可能，最终将使人类社会和信息空
间融为一体。
大数据是高速跑车，云计算是高速公路，随着博客、社交网络、以及云计算、物联网等技术的兴起，互
联网上数据信息正以前所未有的速度增长和累积。互联网用户的互动，企业和政府的信息发布，物联网
传感器感应的实时信息每时每刻都在产生大量的结构化和非结构化数据，这些数据分散在整个互联网网
络体系内，体量极其巨大。这些数据中蕴含了对经济，科技，教育等等领域非常宝贵的信息。这就是互
联网大数据兴起的根源和背景。
云计算相当于人的大脑，是物联网的神经中枢。云计算是基于互联网的相关服务的增加、使用和交付模
式，通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源。目前很多物联网的服务器部署在云
端，通过云计算提供应用层的各项服务。云计算可以认为包括以下几个层次的服务：基础设施即服务，
平台即服务和软件即服务。
大数据作为人类社会发展的大趋势，这一点是毋庸置疑的，对此我坚决赞成。信息技术在人类社会当中
的发展是呈现波浪状特征的，在上世纪80年代以前主要关心单机应用，80年代以后关注局域网，到90年
代关注行业内联网，2000年前后开始进入国际互联网的大规模应用时代，2010年前后开始关注大规模数
据的存储技术云计算和大规模数据的分析技术，也就是大数据。应该说，现在正处在大数据时代最开始
的阶段，能够看出一种趋势，但是真正到来还为时过早。按照信息技术的演进逻辑就是，信息处理技术
、信息传递技术、信息存储技术、信息分析技术，现在到了大规模存储和分析并行的时代了。我认为当
前我们的社会只是有了一点大数据时代的萌芽，我们离大数据还相当遥远。如何判断什么时候进入大数
据时代呢？我个人认为可以采用我们常用的60%标准，也就是如果社会当中产生的数据记录有60%可以通
过同一平台进行检索的时候，我们说这个社会就整体上进入了大数据时代。因此，整合就是大数据最为
艰难的事情，仅仅政府内部的数据整合问题就已经复杂无比，现在需要将政府数据、企业数据、个人数
据、社会数据都整合在一起，其难度可想而知。
人工智能的起点是人机交互的革命。要让机器变得更智能，我们会用更多增强体验的方式去改变今天的
人机交互。因此，前端技术是有很大延展空间的。今天立足在计算机领域我们是有优势的，那么在其它
领域呢，我们今天的技能是否做到了编程语言与平台不受限。由此也看到前端工程师在大数据时代涉及
的一些工作非常需要有综合能力。前端工程师的基础能力从过去纵深到现在更趋向于T字型发展。我相信
这是未来工程师们的基本形态。