Re: Flink 提交到yarn失败

2021-06-18 Thread Zhiwen Sun
HADOOP_CLASSPATH 设置了吗? Zhiwen Sun On Fri, Jun 18, 2021 at 9:47 AM yangpengyi <963087...@qq.com.invalid> wrote: > 环境: FLINK 1.12 & CDH6.1.1 > 问题: > > 利用yarn-per-job提交时,在初始化hdfs客户端时出错。看起来应该是hadoop版本的兼容问题,不过从堆栈看应该使用到了正确的客户端jar包。 > Caused by: org.apache.flink.core.fs.UnsupportedFileSystemSchemeExc

Re: Flink 提交到yarn失败

2021-06-18 Thread yangpengyi
设置了,从堆栈来看根源是调用client的initialze方法有问题,这里应该是获取到了hadoop classpath中的正确版本的客户端 org.apache.hadoop.hdfs.DistributedFileSystem.initialize(DistributedFileSystem.java:167)~[hadoop-hdfs-client-3.0.0-cdh6.1.1.jar:?] -- Sent from: http://apache-flink.147419.n8.nabble.com/