图解数据计算中的窗口概念

Posted 2021-12-14 小基基o_O

文章目录

• 窗口
• 基于时间的窗口
• • 滑动窗口
  • 滚动窗口
  • 会话窗口
• 基于事件个数的窗口
• • 滑动窗口
  • 滚动窗口

窗口

• 窗口概念：将 无界限的 数据 切分为 有界限的 数据
• 典型示例：统计每分钟的流量，这就是个基于时间的滚动窗口

窗口分类	说明	e.g.
基于时间的窗口	时间驱动	滚动窗口、滑动窗口、会话窗口
基于事件个数的窗口	事件驱动	滚动窗口、滑动窗口

基于时间的窗口

滑动窗口

• 窗口大小：时间长短，如1分钟、1小时、1天…
• 窗口滑动步长：时间长短，如1分钟、1小时、1天…

$滑动步长>窗口大小$：窗口之间有缝隙，1个事件属于1个或0个窗口
$滑动步长<窗口大小$：窗口会重叠，1个事件属于1个或n个窗口
$滑动步长=窗口大小$：相当于滚动窗口

滚动窗口

• $窗口大小=滑动步长$

窗口之间不重叠
窗口之间没有缝隙
一个事件只属于一个窗口

会话窗口

• 没有固定的开启时间和关闭时间
• 一段时间没有收到数据，会话就会关闭，而这个 这个没有收到数据的时间段 就是 会话之间的间隔
  设置间隔的长短 可以实现不同的 会话窗口划分

窗口之间不重叠
窗口之间有缝隙
一个事件只属于一个窗口

基于事件个数的窗口

滑动窗口

• 窗口大小：事件个数，例如1个事件、2个事件、3个事件…
• 窗口滑动步长：事件个数，例如1个事件、2个事件、3个事件…

$滑动步长>窗口大小$：窗口之间有缝隙，1个事件属于1个或0个窗口
$滑动步长<窗口大小$：窗口会重叠，1个事件属于1个或n个窗口
$滑动步长=窗口大小$：相当于滚动窗口

滚动窗口

• $窗口的事件个数=窗口滑动的事件个数$

窗口不会重叠
一个事件只属于一个窗口