后端开发||数据挖掘

Posted 2021-04-27 e路扬帆工作室

当今现代化进程加剧

大数据时代下

每天我们都遭受"数据轰炸"

大噶对数据又有多少清晰的了解呢？

小帆今天理一理

你肯定是疑惑满满

赶紧看看去吧 ~ ~ ~

简介

数据挖掘（Data mining）又译为资料探勘、数据采矿

指从大量的数据中通过算法搜索隐藏于其中信息和知识的过程

通过统计、在线分析处理、情报检索、机器学习、专家系统和模式识别等诸多方法得以实现

所属学科：计算机科学

图片来源：百度百科

数据挖掘的新思想

1)来自统计学的抽样、估计和假设检验

2)人工智能、模式识别和机器学习的搜索算法、建模技术和学习理论

3)最优化、进化计算、信息论、信号处理、可视化和信息检索

4)数据库系统有效的存储、索引和查询处理

5)高性能计算的技术处理海量数据集

分布式技术也能帮助处理海量数据

发展阶段

第一阶段：电子邮件阶段

第二阶段：信息发布阶段

第三阶段： EC，即电子商务阶段

第四阶段：全程电子商务阶段

运用分析方法

a)数据挖掘的系统模型

b)估计（Estimation）

c)预测（Prediction）

d)相关性分组或关联规则（Affinity grouping or association rules）

e) 聚类（Clustering）

f)复杂数据类型挖掘(Text, Web ,图形图像，视频，音频等)

经典算法

C4.5：是机器学习算法中的一种分类决策树算法，其核心算法是ID3算法

K-means算法：是一种聚类算法

SVM：一种监督式学习的方法，广泛运用于统计分类以及回归分析

Apriori ：是一种最有影响的挖掘布尔关联规则频繁项集的算法

应用领域

情报检索、数据分析、模式识别

商务管理、生产控制，市场分析

工程设计、科学探索等

数据挖掘成熟地广泛应用在西方金融行业企业中，可以成功预测银行客户需求。深入地挖掘数据模式及特征，然后可能发现某个客户、消费群体或组织的金融和商业兴趣，并观察金融市场的变化趋势

数据挖掘也充分利用了人工智能（AI）和统计分析，以致力于模式发现和预测

数据挖掘也涉及相关的隐私问题

政府和商业数据的挖掘

可能会涉及到

国家安全或者商业机密之类的问题

它必须受到规范

应当在适当的说明下使用

如果数据是收集自特定的个人

那么就会出现一些涉及

保密、法律和伦理的问题

你认为数据挖掘是怎样的呢？

欢迎评论区留言.......

图片来源|e路扬帆工作室

文字来源|e路扬帆工作室

今日小帆：BEYOND

以爱与青春为名，陪你一路成长

不失初心，不忘初衷

e路扬帆工作室