hadoop fs -put 上传文件时挂起
在用 “hadoop fs -put....” 上传文件到hdfs时,偶尔有时会挂起,用"ps -aux"查看,"hadoop fs -put"会长时间存在。昨天上传一个15MB左右的文件到hdfs , 但最终在hdfs下查看该文件被上传了5MB左右 , 查看日志 上传该文件的命令被挂起,长时间不退出.经过查看namenode的日志, 发现一点可疑的地方
---------------------------------------------
2013-02-21 17:35:56,779 INFO org.apache.hadoop.hdfs.server.namenode.FSNamesystem: Recovering lease=, src=/9527kfp/avfiles/360p.part8v.mp4
2013-02-21 17:36:34,233 INFO org.apache.hadoop.hdfs.StateChange: Removing lease onfile /9527kfp/avfiles/360p.part8v.mp4 from client NN_Recovery
2013-02-21 17:36:34,266 INFO org.apache.hadoop.hdfs.server.namenode.FSNamesystem: commitBlockSynchronization(newblock=blk_6247157035943498518_32841, file=/9527kfp/avfiles/360p.part8v.mp4, newgenerationstamp=32841, newlength=6029312, newtargets=) successful
---------------------------------------------
还请专家看看 ,这是怎么回事,怎么解决这.
页:
[1]