Re: 关于hadoop-3.3.1版本使用libhdfs3.so 访问hdfs联邦模式router节点rpc端口有20分钟延时问题

2023-10-30 Thread Xiaoqiao He
Add hdfs-dev@h.a.o and user@h.a.o On Thu, Oct 26, 2023 at 7:07 PM 王继泽 wrote: > 最近在使用hadoop的过程中,发现了一个情况。 > 当我使用c > api向hdfs联邦模式router节点rpc端口发送请求时,比如说写文件,客户端发送完成请求后,hadoop端需要20分钟延时文件才有字节大小,延时期间不能对文件进行操作。 > > 客户端这边运行结束之后,hadoop端日志大致过程: > 1.namenode接收到客户端的请求,FSEditLog打印日志。 >

关于hadoop-3.3.1版本使用libhdfs3.so 访问hdfs联邦模式router节点rpc端口有20分钟延时问题

2023-10-26 Thread 王继泽
最近在使用hadoop的过程中,发现了一个情况。 当我使用c api向hdfs联邦模式router节点rpc端口发送请求时,比如说写文件,客户端发送完成请求后,hadoop端需要20分钟延时文件才有字节大小,延时期间不能对文件进行操作。 客户端这边运行结束之后,hadoop端日志大致过程: 1.namenode接收到客户端的请求,FSEditLog打印日志。 2.blockmanager.BlockPlacementPolicy: 提示没有足够的副本可供选择. Reason:{NO_REQUIRED_STORAGE_TYPE=1} 3.StateChange: 分配block