专题 › 大数据资源 › 如何进行Hadoop二次开发指导视频下载

pig2 发表于 2014-1-9 22:10:44

如何进行Hadoop二次开发指导视频下载

本帖最后由 pig2 于 2014-1-9 22:22 编辑

本视频适合对Java有一定了解，熟悉java se的Hadoop爱好者，想对Hadoop进行二次开发。下面是以伪分布为例：

想对Hadoop二次开发：
一.首先需要Hadoop和Java之间搭建Eclipse搭建一个桥梁，也就是所谓的插件。
这个插件是由Hadoop来提供的。只要安装Hadoop，就可以在Hadoop安装目录中找到Hadoop-xx-eclipse-pligin.jar。

图1
二.把这个插件添加到Eclipse安装目录的插件文件夹

图2
在复制的过程中注意权限问题
三.复制完成之后，需要重启Eclipse。然后定位Hadoop安装目录。

图3
（1）选择Hadoop安装目录


图4
四.调出map/reduce location信息窗口

（1）通过如下操作添加map/reduce视图


图5


图6
（2）通过图7，图8操作显示map/reduce location信息窗口


图7

图8


图9
图9就可以看到map/reduce location信息窗口

五连接Hadoop
这一步主要配置开发那一台机器的Hadoop。通过new hadoop location，弹出信息配置窗口。
这里需要注意的是，对于伪分布这里填写的location，远程的需要填写ip，端口的配置要与map-site一致，否则会出错。

图10


图11


图12



图13
图14
六连接成功
连接则会出现图15所示


图15

链接: http://pan.baidu.com/s/1iWRhk 密码: **** Hidden Message *****
想对map-reduce开发可以查看
Hadoop开发环境搭建及map-reduce开发实例讲解视频下载

哈读普阿，思密 发表于 2014-1-9 22:29:41

学习下，hadoop2次开发，谢谢楼主分享

1635670996 发表于 2014-1-10 10:05:31

这个视频真的很不错，有助于新手学习，大家一起加油

许我半世沧桑2.0 发表于 2014-1-10 14:36:24

非常好一级棒

easy 发表于 2014-1-10 17:40:31

不错 好好学习

lidahe 发表于 2014-1-16 09:01:45

不错 好好学习

张小强 发表于 2014-1-28 12:33:46

加油啊~快点学起来~

平淡一生 发表于 2014-1-28 21:33:19

必须回复才能看，太不人性化了！

井新 发表于 2014-1-29 22:12:36

{:soso_e100:}

TBY-Owen 发表于 2014-2-7 16:31:02

{:soso_e100:}

查看完整版本: 如何进行Hadoop二次开发指导视频下载