其他分享
首页 > 其他分享> > Flink流处理基础之watermark

Flink流处理基础之watermark

作者:互联网

两个概念

处理时间:流处理算子所在机器的本地时间。
事件时间:数据流中事件发生的实际时间,一般是附加在数据流中事件的时间戳。

watermark -- 事件时间窗口的触发时机

实际生产中,事件不可避免会产生延迟,如何判断某一时间点之前的事件都已接收到,从而触发流处理算子工作?Flink提供了水位线机制,水位线就是告诉Flink,某个时间戳之前的事件都已全部到达。当算子接收到时间为T的水位线,算子就会认为不会再接收到时间戳小于或等于T的事件了。

标签:watermark,处理,Flink,水位,时间,事件,算子
来源: https://www.cnblogs.com/route/p/15840556.html