您好。
flink证书认证的相关密码作为参数配置,在Flink-conf.xml文件中,只能使用明文设置,可能导致密码泄露的风险。是否有人可以提供一些扩展功能,允许开发人员配置加解密指定类或者方法来进行加解密?就像是对所有的用户可以提供加解密密码的类文件或者jar包。用户可以通过配置Flink的类路径来解决此问题,谢谢!
使用flink kubernetes
application模式运行flink作业需要将作业打包进镜像,这对于有大量用户个性化作业场景使用不是很方便,需要维护很多作业镜像版本。有没有办法在执行时引用到镜像外部的作业jar包或python文件,例如HDFS或者阿里云OSS。或者有其他workaround办法,之前听过init-container,但不知道具体要怎么使用,还请赐教!谢谢!
oss 可以挂载到容器上
On Thu, May 5, 2022 at 6:27 PM casel.chen wrote:
> 使用flink kubernetes
> application模式运行flink作业需要将作业打包进镜像,这对于有大量用户个性化作业场景使用不是很方便,需要维护很多作业镜像版本。有没有办法在执行时引用到镜像外部的作业jar包或python文件,例如HDFS或者阿里云OSS。或者有其他workaround办法,之前听过init-container,但不知道具体要怎么使用,还请赐教!谢谢!
在Flink 1.13后,应该可以使用Pod template 去配置如何启动JM/TM pod。你可以在pod
template中,如mefor所说的,将你的jar包放在一个volume里,然后挂载在main
container中。这样container中就能访问你的作业包了,所以在提交作业时,你就可以指定你的作业jar包路径为,
local:///the/path/your/jar。
关于volume参考https://kubernetes.io/zh/docs/concepts/storage/volumes/
你提到的init-container我猜测应该是指链接中提到的“
退订
zh...@greatld.com
发件人: Peng Vincent
发送时间: 2022-04-16 11:59
收件人: user-zh
主题: 退订
Best wishes!
Vincent
user-zh-uc.1651815931.fkdjmabebcamkifpifpd-zhaoy=greatld@flink.apache.org
zh...@greatld.com
From: user-zh-help
Date: 2022-05-06 13:45
To: zhaoy
Subject: confirm unsubscribe from user-zh@flink.apache.org
Hi! This is the ezmlm program. I'm managing the
user-zh@flink.apache.org mailing li
退订发任意主题的邮件至 user-zh-unsubscr...@flink.apache.org 即可
- 原始邮件 -
发件人: "顺其自然" <712677...@qq.com.INVALID>
收件人: "user-zh"
发送时间: 星期五, 2022年 5 月 06日 下午 1:57:30
主题: 退订
退订
退订发任意主题的邮件至 user-zh-unsubscr...@flink.apache.org 即可
- 原始邮件 -
发件人: zh...@greatld.com
收件人: "user-zh"
发送时间: 星期五, 2022年 5 月 06日 下午 1:44:44
主题: 退订
退订
zh...@greatld.com
发件人: Peng Vincent
发送时间: 2022-04-16 11:59
收件人: user-zh
主题: 退订
Best wishes!
Vincent