大数据概述

Posted 2020-10-26 157 符致伟

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了大数据概述相关的知识，希望对你有一定的参考价值。

试述大数据对思维方式的重要影响。

（1）大数据而不是样本数据

　　过去，受数据存储和处理能力的限制，在科学分析中，通常采用抽样的方法，从大数据中抽取一部分样本数据，通过对样本数据的分析，来推断大数据的总体特征。样本数据规模要比大数据小得多，因此，可以在可控的代价内实现数据分析的目的。

　　现在迎来大数据时代，大数据技术的核心就是对海量数据的存储与处理，分布式文件系统和分布式数据库技术，提供了理论上近乎无限的数据存储能力。

（2）讲究效率而不是精确

　　过去，我们在科学分析中采用抽样分析方法，就必须追求分析方法的精确性，因为，抽样分析只是针对部分样本的分析，其分析结果被应用到大数据以后，误差会被放大，这就意味着，抽样分析的微小误差，被放大到大数据以后，可能会变成一个很大的误差。因此，为了保证误差被放大到全集数据时仍然处于可以接受的范围，就必要确保抽样分析结果的精确性。正是由于这个原因，传统的数据分析方法往往更加注重提高算法的精确性，其次才是提高算法效率。

　　现在，大数据时代采用全样分析而不是抽样分析，全样分析结果就不存在误差被放大的问题，因此，追求高精确性已经不是其首要目标；相反，大数据时代具有“秒级响应”的特征，要求在几秒内就迅速给出针对海量数据的实时分析结果，否则就会丧失数据的价值，因此，数据分析的效率成为关注的核心。

（3）强调相关性而不是旧的因果性

　　过去，数据分析的目的，一方面是解释事物背后的发展机理，比如，一个大型超市在某个地区的连锁店在某个时期内净利润下降很多，这就需要IT部门对相关销售数据进行详细分析找出发生问题的原因；另一方面是用于预测未来可能发生的事件，比如，通过实时分析微博数据，当发现人们对雾霾的讨论明显增加时，就可以建议销售部门增加口罩的进货量，因为，人们关注雾霾的一个直接结果是，大家会想到购买一个口罩来保护自己的身体健康。不管是哪个目的，其实都反映了一种“因果关系”。

　　现在的大数据时代，因果关系不再那么重要，人们转而追求“相关性”而非“因果性”。

大数据、云计算、物联网之间的区别与联系

大数据：指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

云计算：是基于互联网的相关服务的增加、使用和交付模式，通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源。

物联网：是新一代信息技术的重要组成部分，也是“信息化”时代的重要发展阶段。顾名思义，物联网就是物物相连的互联网。这有两层意思：其一，物联网的核心和基础仍然是互联网，是在互联网基础上的延伸和扩展的网络；其二，其用户端延伸和扩展到了任何物品与物品之间，进行信息交换和通信，也就是物物相息。

物联网和云计算之间的联系

　　云计算相当于人的大脑，是物联网的神经中枢。云计算是基于互联网的相关服务的增加、使用和交付模式，通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源。

大数据与云计算的联系

　　大数据与云计算的关系是密不可分。大数据必然无法用单台的计算机进行处理，必须采用分布式架构。它的特色在于对大量的数据进行分布式数据挖掘。但它必须依托云计算的分布式处理、分布式数据库和云存储、虚拟化技术。

大数据、云计算和物联网的联系

　　物联网对应了互联网的感觉和运动神经系统。云计算是互联网的核心硬件层和核心软件层的集合，也是互联网中枢神经系统萌芽。大数据代表了互联网的信息层，是互联网智慧和意识产生的基础。包括物联网，传统互联网，移动互联网在源源不断的向互联网大数据层汇聚数据和接受数据。云计算与物联网则推动了大数据的发展。

3.简述你对大数据应用与发展的看法，以及你在这次大数据浪潮中想扮演什么角色。