Re: 关于savepoint恢复问题咨询

2021-05-26 文章 LakeShen
看下你的 flink 命令对不对,然后去 Flink Web UI Checkpoint 界面,看下是否从 Savepoint 恢复(下面有个 restore path). 之后再看下你的窗口时间类型用的是什么。 Best, LakeShen 王春浩 于2021年5月27日周四 上午9:26写道: > hi, 社区 > ​ > 版本flink 1.7 > ​ > > 我正在尝试从保存点(或检查点)还原flink作业,该作业的工作是从kafka读取->执行30分钟的窗口聚合(只是AggregationFunction,就像一个计数器)->下沉到kafka。 > ​ >

关于savepoint恢复问题咨询

2021-05-26 文章 王春浩
hi, 社区 ​ 版本flink 1.7 ​ 我正在尝试从保存点(或检查点)还原flink作业,该作业的工作是从kafka读取->执行30分钟的窗口聚合(只是AggregationFunction,就像一个计数器)->下沉到kafka。 ​ 我使用rocksdb和启用检查点。 ​ 现在我尝试手动触发一个保存点。 每个汇总的期望值是30(1个数据/每分钟)。 但是,当我从保存点还原时(flink运行-d -s {savepoint的url}),聚合值不是30(小于30,取决于我取消flink作业并还原的时间)。 但是当作业正常运行时,它将达到30。 ​ 我不知道为什么有些数据似乎会丢失?