Window Operations

Posted 2020-09-14 天之涯0204

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了Window Operations相关的知识，希望对你有一定的参考价值。

Window Operations 有点类似于Storm中的State，可以设置窗口的大小和滑动窗口的间隔来动态的获取当前Steaming的允许状态,可以对一段时间的数据进行处理。

如图
window length 为3秒
sliding interval 为2秒
batch interval of the source DStream 为1秒

那么就可以通过window函数对每隔2秒，3秒内的数据进行处理

window Operations一般有两个参数
window length - window的时长
sliding interval - 滑动间隔

这两个值必须是DStream间隔的倍数

以上是关于Window Operations的主要内容，如果未能解决你的问题，请参考以下文章