flink oom

2021-07-13 Thread Hui Wang
Hi: 我遇到这么一个问题,flinkover窗口,窗口大小1小时,这个任务频道oom,看了gc日志,非常频烦,想问下,窗口中会缓存所有窗口事件吗?

Re: flink oom

2021-07-13 Thread Caizhi Weng
Hi! agg 需要的数据都会存在 state backend 里。是否配置了外部的 state backend 呢?如果没有配置的话就会使用 memory 的 state backend,可能会 oom。 Hui Wang <463329...@qq.com.invalid> 于2021年7月14日周三 下午2:03写道: > Hi: > 我遇到这么一个问题,flinkover窗口,窗口大小1小时,这个任务频道oom,看了gc日志,非常频烦,想问下,窗口中会缓存所有窗口事件吗?

Re: flink oom

2021-07-14 Thread Hui Wang
Hi 我是开启了StateBackend的,使用的是filesystem,每半小时一次。 ---Original--- From: "Caizhi Weng"