2.1Dstreams数据源之基本数据源

Posted lybpy

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了2.1Dstreams数据源之基本数据源相关的知识,希望对你有一定的参考价值。

1、文件数据源

  textFileStream,条件:  

    1. 文件类型相同
    2. 文件通过移动进入目录才能检测到
    3. 文件进入目录不可修改,即使更改内容,也不会读取数据  

  目前不支持嵌套目录

 

2、自定义数据源

 

3、RDD队列

以上是关于2.1Dstreams数据源之基本数据源的主要内容,如果未能解决你的问题,请参考以下文章

Spark中文手册5:Spark之基本概念

Output Operations on DStreams

爬虫基本工系列之--数据存储

01 MySQL之数据库基本操作

大数据技术之Hive基本概念安装数据类型

大数据技术之Hive基本概念安装数据类型