阿里云-云小站(无限量代金券发放中)
【腾讯云】云服务器、云数据库、COS、CDN、短信等热卖云产品特惠抢购

Fedora 20 编译Hadoop-eclipse 1.1.2插件(Hadoop开发环境搭建)

414次阅读
没有评论

共计 3957 个字符,预计需要花费 10 分钟才能阅读完成。

Fedora 20 Hadoop 开发环境搭建

1、配置信息:

操作系统:fedora 20 X86

eclipse 版本:eclipse-jee-helios-SR2-linux-gtk.tar.gz(最好选用 Galileo 或 Helios,不然可能有兼容问题)

hadoop 版本:hadoop-1.1.2.tar.gz

ant 版本:apache-ant-1.9.3-bin.tar.gz

2、编译生成 hadoop-eclipse-plugin-1.1.2.jar

2.1 修改 ${hadoop.root}/src/contrib 目录的 build-contrib.xml 文件,添加 eclipse 路径和 hadoop 版本信息

<property name=”eclipse.home”location=”/hugl/Android/eclipse”/>
<property name=”version”value=”1.1.2″/>

如图所示:

Fedora 20 编译 Hadoop-eclipse 1.1.2 插件(Hadoop 开发环境搭建)

2.2 修改 ${hadoop.root}/src/contrib/eclipse-plugin 目录下的 build.xml 文件,在 id 为 classpath 的 path 节点添加 hadoop-core 的 jar 依赖, 添加如下一条记录

<pathelement location=”${hadoop.root}/hadoop-core-1.1.2.jar”/>

如图所示:

Fedora 20 编译 Hadoop-eclipse 1.1.2 插件(Hadoop 开发环境搭建)

同时修改找到 name 为 jar 的 target,将相应的 jar 文件打包进插件的 lib 目录

将原来的 <copy file=”${hadoop.root}/build/hadoop-core-${version}.jar” tofile=”${build.dir}/lib/hadoop-core.jar” verbose=”true”/>
<copy file=”${hadoop.root}/build/ivy/lib/Hadoop/common/commons-cli-${commons-cli.version}.jar” todir=”${build.dir}/lib” verbose=”true”/> 两行记录注释掉,将如下结果添加在此处:

<copy file=”${hadoop.root}/hadoop-core-${version}.jar” tofile=”${build.dir}/lib/hadoop-core.jar” verbose=”true”/>
<copy file=”${hadoop.root}/lib/commons-cli-${commons-cli.version}.jar” todir=”${build.dir}/lib” verbose=”true”/>
<copy file=”${hadoop.root}/lib/commons-lang-2.4.jar” todir=”${build.dir}/lib” verbose=”true”/>
<copy file=”${hadoop.root}/lib/commons-configuration-1.6.jar” todir=”${build.dir}/lib” verbose=”true”/>
<copy file=”${hadoop.root}/lib/jackson-mapper-asl-1.8.8.jar” todir=”${build.dir}/lib” verbose=”true”/>
<copy file=”${hadoop.root}/lib/jackson-core-asl-1.8.8.jar” todir=”${build.dir}/lib” verbose=”true”/>
<copy file=”${hadoop.root}/lib/commons-httpclient-3.0.1.jar” todir=”${build.dir}/lib” verbose=”true”/>

如图所示:

Fedora 20 编译 Hadoop-eclipse 1.1.2 插件(Hadoop 开发环境搭建)

 

2.3 修改 MANIFEST.MF 文件里面 Bundle-ClassPath 属性值

修改结果为:Bundle-ClassPath: classes/,lib/Hadoop-core.jar,lib/commons-cli-1.2.jar,lib/commons-configuration-1.6.jar,lib/commons-httpclient-3.0.1.jar,lib/commons-lang-2.4.jar,lib/jackson-core-asl-1.8.8.jar,lib/jackson-mapper-asl-1.8.8.jar

如图所示:

Fedora 20 编译 Hadoop-eclipse 1.1.2 插件(Hadoop 开发环境搭建)

 

3、在命令行进入 ${hadoop.root}/src/contrib/eclipse-plugin 目录,输入 ant 命令
最后在 ${hadoop.root}/build/contrib/eclipse-plugin 目录生成打包好的插件,将 hadoop-eclipse-plugin-1.1.2.jar 文件复制到 eclipse 的 plugins 目录

 

4、点击 Eclipse->Window->Open Perspectice->other 选择 Map/Reduce, 如图所是:

Fedora 20 编译 Hadoop-eclipse 1.1.2 插件(Hadoop 开发环境搭建)

5、点击 Eclipse->Window->show view->other 选择 Map/Reduce Locations, 如图所是:

Fedora 20 编译 Hadoop-eclipse 1.1.2 插件(Hadoop 开发环境搭建)

 

6、在 eclipse 右下侧,右键选择选择 New hadoop location, 配置好后就 ok 了

Fedora 20 编译 Hadoop-eclipse 1.1.2 插件(Hadoop 开发环境搭建)

更多 Hadoop 相关信息见Hadoop 专题页面 http://www.linuxidc.com/topicnews.aspx?tid=13

更多 Fedora 相关信息见Fedora 专题页面 http://www.linuxidc.com/topicnews.aspx?tid=5

Fedora 20 Hadoop 开发环境搭建

1、配置信息:

操作系统:fedora 20 X86

eclipse 版本:eclipse-jee-helios-SR2-linux-gtk.tar.gz(最好选用 Galileo 或 Helios,不然可能有兼容问题)

hadoop 版本:hadoop-1.1.2.tar.gz

ant 版本:apache-ant-1.9.3-bin.tar.gz

2、编译生成 hadoop-eclipse-plugin-1.1.2.jar

2.1 修改 ${hadoop.root}/src/contrib 目录的 build-contrib.xml 文件,添加 eclipse 路径和 hadoop 版本信息

<property name=”eclipse.home”location=”/hugl/Android/eclipse”/>
<property name=”version”value=”1.1.2″/>

如图所示:

Fedora 20 编译 Hadoop-eclipse 1.1.2 插件(Hadoop 开发环境搭建)

2.2 修改 ${hadoop.root}/src/contrib/eclipse-plugin 目录下的 build.xml 文件,在 id 为 classpath 的 path 节点添加 hadoop-core 的 jar 依赖, 添加如下一条记录

<pathelement location=”${hadoop.root}/hadoop-core-1.1.2.jar”/>

如图所示:

Fedora 20 编译 Hadoop-eclipse 1.1.2 插件(Hadoop 开发环境搭建)

同时修改找到 name 为 jar 的 target,将相应的 jar 文件打包进插件的 lib 目录

将原来的 <copy file=”${hadoop.root}/build/hadoop-core-${version}.jar” tofile=”${build.dir}/lib/hadoop-core.jar” verbose=”true”/>
<copy file=”${hadoop.root}/build/ivy/lib/Hadoop/common/commons-cli-${commons-cli.version}.jar” todir=”${build.dir}/lib” verbose=”true”/> 两行记录注释掉,将如下结果添加在此处:

<copy file=”${hadoop.root}/hadoop-core-${version}.jar” tofile=”${build.dir}/lib/hadoop-core.jar” verbose=”true”/>
<copy file=”${hadoop.root}/lib/commons-cli-${commons-cli.version}.jar” todir=”${build.dir}/lib” verbose=”true”/>
<copy file=”${hadoop.root}/lib/commons-lang-2.4.jar” todir=”${build.dir}/lib” verbose=”true”/>
<copy file=”${hadoop.root}/lib/commons-configuration-1.6.jar” todir=”${build.dir}/lib” verbose=”true”/>
<copy file=”${hadoop.root}/lib/jackson-mapper-asl-1.8.8.jar” todir=”${build.dir}/lib” verbose=”true”/>
<copy file=”${hadoop.root}/lib/jackson-core-asl-1.8.8.jar” todir=”${build.dir}/lib” verbose=”true”/>
<copy file=”${hadoop.root}/lib/commons-httpclient-3.0.1.jar” todir=”${build.dir}/lib” verbose=”true”/>

如图所示:

Fedora 20 编译 Hadoop-eclipse 1.1.2 插件(Hadoop 开发环境搭建)

 

正文完
星哥玩云-微信公众号
post-qrcode
 0
星锅
版权声明:本站原创文章,由 星锅 于2022-01-20发表,共计3957字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
【腾讯云】推广者专属福利,新客户无门槛领取总价值高达2860元代金券,每种代金券限量500张,先到先得。
阿里云-最新活动爆款每日限量供应
评论(没有评论)
验证码
【腾讯云】云服务器、云数据库、COS、CDN、短信等云产品特惠热卖中

星哥玩云

星哥玩云
星哥玩云
分享互联网知识
用户数
4
文章数
19348
评论数
4
阅读量
7828013
文章搜索
热门文章
开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南

开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南

开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南 大家好,我是星哥。之前介绍了腾讯云的 Code...
星哥带你玩飞牛NAS-6:抖音视频同步工具,视频下载自动下载保存

星哥带你玩飞牛NAS-6:抖音视频同步工具,视频下载自动下载保存

星哥带你玩飞牛 NAS-6:抖音视频同步工具,视频下载自动下载保存 前言 各位玩 NAS 的朋友好,我是星哥!...
云服务器部署服务器面板1Panel:小白轻松构建Web服务与面板加固指南

云服务器部署服务器面板1Panel:小白轻松构建Web服务与面板加固指南

云服务器部署服务器面板 1Panel:小白轻松构建 Web 服务与面板加固指南 哈喽,我是星哥,经常有人问我不...
我把用了20年的360安全卫士卸载了

我把用了20年的360安全卫士卸载了

我把用了 20 年的 360 安全卫士卸载了 是的,正如标题你看到的。 原因 偷摸安装自家的软件 莫名其妙安装...
星哥带你玩飞牛NAS-3:安装飞牛NAS后的很有必要的操作

星哥带你玩飞牛NAS-3:安装飞牛NAS后的很有必要的操作

星哥带你玩飞牛 NAS-3:安装飞牛 NAS 后的很有必要的操作 前言 如果你已经有了飞牛 NAS 系统,之前...
阿里云CDN
阿里云CDN-提高用户访问的响应速度和成功率
随机文章
开源MoneyPrinterTurbo 利用AI大模型,一键生成高清短视频!

开源MoneyPrinterTurbo 利用AI大模型,一键生成高清短视频!

  开源 MoneyPrinterTurbo 利用 AI 大模型,一键生成高清短视频! 在短视频内容...
优雅、强大、轻量开源的多服务器监控神器

优雅、强大、轻量开源的多服务器监控神器

优雅、强大、轻量开源的多服务器监控神器 在多台服务器同时运行的环境中,性能监控、状态告警、资源可视化 是运维人...
每天一个好玩的网站-手机博物馆-CHAZ 3D Experience

每天一个好玩的网站-手机博物馆-CHAZ 3D Experience

每天一个好玩的网站 - 手机博物馆 -CHAZ 3D Experience 一句话介绍:一个用 3D 方式重温...
星哥带你玩飞牛 NAS-9:全能网盘搜索工具 13 种云盘一键搞定!

星哥带你玩飞牛 NAS-9:全能网盘搜索工具 13 种云盘一键搞定!

星哥带你玩飞牛 NAS-9:全能网盘搜索工具 13 种云盘一键搞定! 前言 作为 NAS 玩家,你是否总被这些...
终于收到了以女儿为原型打印的3D玩偶了

终于收到了以女儿为原型打印的3D玩偶了

终于收到了以女儿为原型打印的 3D 玩偶了 前些日子参加某网站活动,获得一次实物 3D 打印的机会,于是从众多...

免费图片视频管理工具让灵感库告别混乱

一言一句话
-「
手气不错
星哥带你玩飞牛NAS-11:咪咕视频订阅部署全攻略

星哥带你玩飞牛NAS-11:咪咕视频订阅部署全攻略

星哥带你玩飞牛 NAS-11:咪咕视频订阅部署全攻略 前言 在家庭影音系统里,NAS 不仅是存储中心,更是内容...
星哥带你玩飞牛NAS-7:手把手教你免费内网穿透-Cloudflare tunnel

星哥带你玩飞牛NAS-7:手把手教你免费内网穿透-Cloudflare tunnel

星哥带你玩飞牛 NAS-7:手把手教你免费内网穿透 -Cloudflare tunnel 前言 大家好,我是星...
颠覆 AI 开发效率!开源工具一站式管控 30+大模型ApiKey,秘钥付费+负载均衡全搞定

颠覆 AI 开发效率!开源工具一站式管控 30+大模型ApiKey,秘钥付费+负载均衡全搞定

  颠覆 AI 开发效率!开源工具一站式管控 30+ 大模型 ApiKey,秘钥付费 + 负载均衡全...
星哥带你玩飞牛NAS-16:不再错过公众号更新,飞牛NAS搭建RSS

星哥带你玩飞牛NAS-16:不再错过公众号更新,飞牛NAS搭建RSS

  星哥带你玩飞牛 NAS-16:不再错过公众号更新,飞牛 NAS 搭建 RSS 对于经常关注多个微...
星哥带你玩飞牛NAS-13:自动追番、订阅下载 + 刮削,动漫党彻底解放双手!

星哥带你玩飞牛NAS-13:自动追番、订阅下载 + 刮削,动漫党彻底解放双手!

星哥带你玩飞牛 NAS-13:自动追番、订阅下载 + 刮削,动漫党彻底解放双手! 作为动漫爱好者,你是否还在为...