Flink重复注册定时器会发生什么
程序员文章站
2022-04-03 12:21:16
...
对于一些应用场景,需要定时器来告诉我们什么时候结束并输出结果,我们可能会在KeyedProcessFunction的实现类中写下如下的代码:
@Override
public void processElement(ItemViewCount value, Context ctx, Collector<String> out) throws Exception {
// 每来一条数据,存入List中,并注册定时器
itemViewCountListState.add(value);
ctx.timerService().registerEventTimeTimer(value.getWindowEnd() + 1);
}
喜欢思考的人可能会想到,processElement函数中每次处理一条数据,这样重复注册定时器,不会导致定时任务重复调用吗?
答案是不会,应为Flink内部使用的HeapPriorityQueueSet来存储定时器,一个注册请求到来时,其add()方法会检查是否已经存在,如果存在则不会加入。
@Override
public void registerProcessingTimeTimer(N namespace, long time) {
InternalTimer<K, N> oldHead = processingTimeTimersQueue.peek();
if (processingTimeTimersQueue.add(new TimerHeapInternalTimer<>(time, (K) keyContext.getCurrentKey(), namespace))) {
long nextTriggerTime = oldHead != null ? oldHead.getTimestamp() : Long.MAX_VALUE;
// check if we need to re-schedule our timer to earlier
if (time < nextTriggerTime) {
if (nextTimer != null) {
nextTimer.cancel(false);
}
nextTimer = processingTimeService.registerTimer(time, this::onProcessingTime);
}
}
}
所以,这样使用是很安全的。相反,如果只想加入一次定时器,需要借助一个ValueState来判断是否是第一次加入,这样反而带来性能的损耗。但是,前提是注册时间一样,如果注册时间变化了,那么这将是一场定时器调用的狂欢????
上一篇: asio重复调用定时器
下一篇: 获取手机的系统信息
推荐阅读