Re:OutOfMemoryError: Direct buffer memory

2022-10-08 文章 allanqinjy
看堆栈信息是内存不够,调大一些看看。我之前在读取hdfs上的一个获取地理位置的离线库,也是内存溢出,通过调整内存大小解决的。用的streamingapi开发的作业,1.12.5版本。 | | allanqinjy | | allanqi...@163.com | 签名由网易邮箱大师定制 On 10/8/2022 21:00,RS wrote: Hi, 版本:Flink-1.15.1 有个场景,从hdfs读文件再处理数据,batch mode,10个并发,使用Flink SQL定义执行,source是connector=filesystem,format=raw,path=

OutOfMemoryError: Direct buffer memory

2022-10-08 文章 RS
Hi, 版本:Flink-1.15.1 有个场景,从hdfs读文件再处理数据,batch mode,10个并发,使用Flink SQL定义执行,source是connector=filesystem,format=raw,path= 执行任务的时候,有时候能成功,有时候失败了然后就一直失败,重启集群好像可以解决问题,这种情况如何是什么原因导致的? 集群的off-heap都是默认配置, taskmanager.memory.task.off-heap.size=0 taskmanager.memory.framework.off-heap.size=128MB 报错堆栈:

Re:Re: table store 和connector-kafka包冲突吗?

2022-10-08 文章 RS
Hi, 报错如下: [ERROR] Could not execute SQL statement. Reason: org.apache.flink.table.api.ValidationException: Multiple factories for identifier 'kafka' that implement 'org.apache.flink.table.factories.DynamicTableFactory' found in the classpath. Ambiguous factory classes are: org.apache.flink.