Matlab使用 MapReduce 在 MATLAB 中分析大数据

Posted code_kd

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Matlab使用 MapReduce 在 MATLAB 中分析大数据相关的知识,希望对你有一定的参考价值。

使用该mapreduce函数处理大量基于文件的数据。MapReduce 算法是许多现代“大数据”应用程序的支柱。此示例在单台计算机上运行,但代码可以扩展以使用 Hadoop。

在这个例子中,数据集是美国统计协会1987年到2008年间美国国内航空公司航班的记录集合。如果你之前尝试过“大数据”,你可能已经熟悉这个数据集。此数据集的一小部分包含在 MATLAB 中,以允许您运行此示例和其他示例。

数据存储简介


创建数据存储允许您以基于块的方式访问数据集合。数据存储可以处理任意大量的数据,数据甚至可以分布在多个文件中。您可以为多种文件类型创建数据存储,包括表格文本文件的集合(此处演示)、SQL 数据库(需要 Database Toolbox)或 Hadoop 分布式文件系统 (HDFS)。

为表格文本文件的集合创建数据存储并预览内容。

以上是关于Matlab使用 MapReduce 在 MATLAB 中分析大数据的主要内容,如果未能解决你的问题,请参考以下文章

在 xcode 项目中使用 Matlab 功能

Matlab使用 MapReduce 计算图像的最大平均 HSV

在 MATLAB 中调试 mapreduce 函数

Matlab使用 MapReduce 计算平均值

3.MATLAB界面介绍

Matlab使用 MapReduce 寻找最大值