??????checkpoint??????state

2020-09-03 文章 sun
??2?? 1checkpointchk-  ??chk-1??chk-2 , 2checkpoint??state?? ?? final StreamExecutionEnvironment streamExecutionEnvironment

????????????checkpoint??????state

2020-09-03 文章 sun
--  -- ??: "user-zh" <13162790...@163.com

??????checkpoint??????state

2020-09-03 文章 sun
??2?? 1checkpointchk-  ??chk-1??chk-2 , 2checkpoint??state?? ?? final StreamExecutionEnvironment streamExecutionEnvironment

??????checkpoint??????state

2020-09-03 文章 sun
??2?? 1checkpointchk-  ??chk-1??chk-2 , 2checkpoint??state?? ?? final StreamExecutionEnvironment streamExecutionEnvironment

??????checkpoint??????state

2020-09-03 文章 sun
??2?? 1checkpointchk-  ??chk-1??chk-2 , 2checkpoint??state?? ?? final StreamExecutionEnvironment streamExecutionEnvironment

?????? flink???????????????? flink last checkpoint ???????????????????????????? state ??????????????

2020-06-23 文章 cs
??checkpoint?? StreamExecutionEnvironment.getCheckpointConfig().setFailOnCheckpointingErrors(true); /** * Sets the expected behaviour for tasks in case that they encounter an error in their checkpointing procedure. * If this is set to true, the task will fail

flink???????????????? flink last checkpoint ???????????????????????????? state ??????????????

2020-06-22 文章 ????????
??flink?? ??checkpoint  

Re: Flink 1.6, increment Checkpoint, the shared dir stored the last year checkpoint state

2020-01-19 文章 Yun Tang
: LakeShen Sent: Sunday, January 19, 2020 18:55 To: user ; user-zh@flink.apache.org ; dev Subject: Flink 1.6, increment Checkpoint, the shared dir stored the last year checkpoint state Hi community, now I have a flink sql job, and I set the flink sql sate retention time, there are three

Flink 1.6, increment Checkpoint, the shared dir stored the last year checkpoint state

2020-01-19 文章 LakeShen
Hi community, now I have a flink sql job, and I set the flink sql sate retention time, there are three dir in flink checkpoint dir : 1. chk -xx dir 2. shared dir 3. taskowned dir I find the shared dir store the last year checkpoint state,the only reason I thought is that the latest

Re: checkpoint、state

2020-01-12 文章 LakeShen
状态先存到本地 比直接存到 HDFS 速度更快,对于 RocksDBStateBackend,状态会先存到本地,然后异步存储到 HDFS。 Px New <15701181132mr@gmail.com> 于2020年1月10日周五 上午10:27写道: > Yes, CheckPoint 是一个封装后的Meta信息 而这个被封装的Meta信息是有所有Operator 的state 的组成了 > > hahaha sc 于2019年11月29日周五 下午4:12写道: > > > > > > flink的每条数据既然都做了checkpoint,做成全局分布式一致性快照,那还需要

Re: checkpoint、state

2020-01-09 文章 Px New
Yes, CheckPoint 是一个封装后的Meta信息 而这个被封装的Meta信息是有所有Operator 的state 的组成了 hahaha sc 于2019年11月29日周五 下午4:12写道: > > flink的每条数据既然都做了checkpoint,做成全局分布式一致性快照,那还需要本地state干啥呢?是否可以理解成,本地state是一致性快照的一部分而已? > 昨天看了 社区的直播回放,听PMC的介绍,好像不是一回事。 >

Re: checkpoint、state

2019-12-01 文章 Congxian Qiu
Hi Checkpoint 是所有本地 state 的一个快照,用于程序出现故障后,进行恢复使用。 Best, Congxian hahaha sc 于2019年11月29日周五 下午4:12写道: > > flink的每条数据既然都做了checkpoint,做成全局分布式一致性快照,那还需要本地state干啥呢?是否可以理解成,本地state是一致性快照的一部分而已? > 昨天看了 社区的直播回放,听PMC的介绍,好像不是一回事。 >

checkpoint、state

2019-11-29 文章 hahaha sc
flink的每条数据既然都做了checkpoint,做成全局分布式一致性快照,那还需要本地state干啥呢?是否可以理解成,本地state是一致性快照的一部分而已? 昨天看了 社区的直播回放,听PMC的介绍,好像不是一回事。