Hi, dlguanyq
Deployment took more than 60 seconds.
——
这个日志表示已经将 Application 提交到 Yarn 了,但是 AM 一直没有启动,这一步和perjob模式或者 yarn-session
模式关系不大。
可以用 -yd 多试几次,还是不能成功的话,需要检查下 yarn 的日志
Best
Weihua Hu
> 2020年4月15日 09:06,guanyq 写道:
>
> 使用的是perjob模式提交作业,没有使用yarn-seesion。为什么perjob模式提交有这个-yd参数会有问题,还是没太懂。
> 在
使用的是perjob模式提交作业,没有使用yarn-seesion。为什么perjob模式提交有这个-yd参数会有问题,还是没太懂。
在 2020-04-15 08:52:11,"tison" 写道:
>-yd 参数影响的是你是否使用 perjob 模式提交作业,简单地说
>
>with -yd 以 perjob 模式提交作业,即启动一个新集群
>without -yd 提交到一个现有的 Flink on YARN 集群
>
>哪个是你的需求呢?有没有实现用 yarn-session 启动 Flink on YARN 集群呢?
>
>Best,
>tison.
>
>
>guanyq
-yd 参数影响的是你是否使用 perjob 模式提交作业,简单地说
with -yd 以 perjob 模式提交作业,即启动一个新集群
without -yd 提交到一个现有的 Flink on YARN 集群
哪个是你的需求呢?有没有实现用 yarn-session 启动 Flink on YARN 集群呢?
Best,
tison.
guanyq 于2020年4月15日周三 上午8:46写道:
> 提交失败,本人测试与-yd参数有关系,这个参数去掉就可以提交了。但是不知道 -yd这个参数影响了什么?
> At 2020-04-14 15:31:00, "guanyq"
提交失败,本人测试与-yd参数有关系,这个参数去掉就可以提交了。但是不知道 -yd这个参数影响了什么?
At 2020-04-14 15:31:00, "guanyq" wrote:
>提交失败,yarn资源也还有很多,为什么会提交失败呢?
>
>提交脚本
>./bin/flink run -m yarn-cluster \
>-ynm TestDataProcess \
>-yd \
>-yn 2 \
>-ytm 1024 \
>-yjm 1024 \
>-c com.data.processing.unconditionalacceptance.TestDataProcess \
提交失败,yarn资源也还有很多,为什么会提交失败呢?
提交脚本
./bin/flink run -m yarn-cluster \
-ynm TestDataProcess \
-yd \
-yn 2 \
-ytm 1024 \
-yjm 1024 \
-c com.data.processing.unconditionalacceptance.TestDataProcess \
./tasks/UnconditionalAcceptanceDataProcess.jar \
yarn资源
Apps Submitted Apps PendingApps Running