求助,关于eclipse提交mapreduce到集群错误

查看数: 22109 | 评论数: 17 | 收藏 0
关灯 | 提示:支持键盘翻页<-左 右->
    组图打开中,请稍候......
发布时间: 2015-3-26 17:17

正文摘要:

在eclipse中完成mapreduce代码,用run on hadoop 提交到集群,报了如下错误

回复

s060403072 发表于 2015-3-27 15:17:17
树叶的狂欢 发表于 2015-3-27 15:00
我把截图中的conf.set()语句去掉的话程序时能跑的,但是只是在本地,我是在网上看到加上那些conf.set() ...

那个是对配置文件的修改,如果不熟悉,改错的可能性很大
树叶的狂欢 发表于 2015-3-27 15:00:14
s060403072 发表于 2015-3-27 12:07
楼主的设置很复杂可以使用这个程序,测试下是否自己程序的问题

新手指导,该如何在开发环境中,创建mapr ...

我把截图中的conf.set()语句去掉的话程序时能跑的,但是只是在本地,我是在网上看到加上那些conf.set()语句,才能把程序提交到真正的集群中,但是我加了就报了上面的错误
树叶的狂欢 发表于 2015-3-27 14:57:25
langke93 发表于 2015-3-27 11:50
lib下的也可导入。
hadoop安装用的是什么用户?root?

是root用户安装的
s060403072 发表于 2015-3-27 12:07:36
楼主的设置很复杂可以使用这个程序,测试下是否自己程序的问题

新手指导,该如何在开发环境中,创建mapreduce程序

langke93 发表于 2015-3-27 11:50:47
树叶的狂欢 发表于 2015-3-27 11:13
按照网上说的,导入的架包如下:
           /hadoop-2.6.0/share/hadoop/common下所有jar包,及里面 ...

lib下的也可导入。
hadoop安装用的是什么用户?root?
树叶的狂欢 发表于 2015-3-27 11:13:20
langke93 发表于 2015-3-27 10:18
都导入了哪些包,报错又是什么


按照网上说的,导入的架包如下:
           /hadoop-2.6.0/share/hadoop/common下所有jar包,及里面的lib目录下所有jar包
          /hadoop-2.6.0/share/hadoop/hdfs下所有jar包,不包括里面lib下的jar包
          /hadoop-2.6.0/share/hadoop/mapreduce下所有jar包,不包括里面lib下的jar包
          /hadoop-2.6.0/share/hadoop/yarn下所有jar包,不包括里面lib下的jar包

错误的话还是上面截图的那个错误啊

langke93 发表于 2015-3-27 10:18:19
树叶的狂欢 发表于 2015-3-27 09:58
导入过包了,还是一样的错误

都导入了哪些包,报错又是什么
树叶的狂欢 发表于 2015-3-27 09:58:02
langke93 发表于 2015-3-26 22:57:15
树叶的狂欢 发表于 2015-3-26 18:08
hadoop错误总结

我看这里面的错误跟我的挺像的,但照上面的方法试了也不对,我再试试把包都引入吧。

可以试试。。。。
关闭

推荐上一条 /2 下一条