hadoop异常处理之exceeds the limit of concurrent xcievers 256

发布时间:2016-12-6 18:12:39 编辑:www.fx114.net 分享查询网我要评论
本篇文章主要介绍了"hadoop异常处理之exceeds the limit of concurrent xcievers 256",主要涉及到hadoop异常处理之exceeds the limit of concurrent xcievers 256方面的内容,对于hadoop异常处理之exceeds the limit of concurrent xcievers 256感兴趣的同学可以参考一下。

异常描述 java.io.IOException: xceiverCount 258 exceeds the limit of concurrent xcievers 256         at org.apache.hadoop.hdfs.server.datanode.DataXceiver.run(DataXceiver.java:165) 查看datanode日志存在*:50010:DataXceiver error processing WRITE_BLOCK operation  src 异常分析 文件操作超租期,实际上就是data stream操作过程中文件被删掉了。之前也遇到过,通常是因为Mapred多个task操作同一个文件,一个task完成后删掉文件导致。 不过这次在hdfs上传文件时发生了这个异常,导致上传失败 解决方案 修改hdfs-site.xml   <property>         <name>dfs.datanode.max.xcievers</name>         <value>8192</value> </property> 拷贝到各datanode节点并重启datanode即可

上一篇:包的定义及导入(打包编译、运行以及jar命令的使用)
下一篇:C# 设置webbrowser 引用的IE版本

相关文章

相关评论