Ubuntu 14.04.4 下 Hadoop环境搭建安装

Ubuntu 14.04.4 下 Hadoop 环境搭建安装

一，准备环境：
1，64 位 ubuntu-14.04.4
2，jdk-7u80-linux-x64

二，配置 jdk:
1，输入命令语句：

2，写入配置信息:

3，使配置信息起作用：

4,jdk 搭建成功：

三，hadoop 的配置：
1，解压 hadoop:
hadoop@master:/mysoftware$ tar -zxvf hadoop-2.6.4.tar.gz
2, 修改 hadoop-env.sh


3, 修改 core-site.xml:

    <configuration>
    <property> 
        <name>fs.defaultFS</name> 
        <value>hdfs://master:9000</value> 
    </property> 
    <property> 
        <name>hadoop.tmp.dir</name> 
        <value>file:/mysoftware/hadoop-2.6.4/tmp</value>
    </property>
    <property>
        <name>hadoop.native.lib</name>
        <value>false</value>
    </property>
 </configuration>

4. 修改 hdfs-site.xml:

<configuration>
    <property> 
        <name>dfs.replication</name> 
        <value>1</value> 
    </property> 
    <property>
        <name>dfs.namenode.name.dir</name>
        <value>file:/mysoftware/hadoop-2.6.4/dfs/name</value>
    </property>
    <property>
        <name>dfs.datanode.data.dir</name>
        <value>file:/mysoftware/hadoop-2.6.4/dfs/data</value>
    </property>
    <property>
        <name>dfs.permissions</name>
        <value>false</value>
    </property>
 </configuration>

5, 修改 mapred-site.xml：

<configuration>
    <property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
    </property>
</configuration>

6，修改 yarn-site.xml：

<configuration>
    <property>
        <description>The hostname of the RM.</description> 
        <name>yarn.resourcemanager.hostname</name> 
        <value>master</value> 
    </property> 
    <property> 
        <name>yarn.nodemanager.aux-services</name> 
        <value>mapreduce.shuffle</value> 
    </property>
</configuration>

7，创建文件夹：

8，修改权限：

9，修改 hostsname:

10, 修改主机信息：

用 #号注释以前的主机名，配上虚拟机的 IP 及名字：

11，格式化 hadoop:
hadoop@master:/mysoftware/hadoop-2.6.4$ bin/hdfs namenode -format
显示下面的信息，则成功：

12，启动 hadoop:
hadoop@master:/mysoftware/hadoop-2.6.4$ sbin/start-dfs.sh

输入：hadoop@master:/mysoftware/hadoop-2.6.4$ jps

看到这 5 个进程就表示成功。
对了这里装的是伪分布式的。

下面关于 Hadoop 的文章您也可能喜欢，不妨看看：

Ubuntu14.04 下 Hadoop2.4.1 单机 / 伪分布式安装配置教程  http://www.linuxidc.com/Linux/2015-02/113487.htm

CentOS 安装和配置 Hadoop2.2.0  http://www.linuxidc.com/Linux/2014-01/94685.htm

Ubuntu 13.04 上搭建 Hadoop 环境 http://www.linuxidc.com/Linux/2013-06/86106.htm

Ubuntu 12.10 +Hadoop 1.2.1 版本集群配置 http://www.linuxidc.com/Linux/2013-09/90600.htm

Ubuntu 上搭建 Hadoop 环境（单机模式 + 伪分布模式）http://www.linuxidc.com/Linux/2013-01/77681.htm

Ubuntu 下 Hadoop 环境的配置 http://www.linuxidc.com/Linux/2012-11/74539.htm

单机版搭建 Hadoop 环境图文教程详解 http://www.linuxidc.com/Linux/2012-02/53927.htm

更多 Hadoop 相关信息见Hadoop 专题页面 http://www.linuxidc.com/topicnews.aspx?tid=13

本文永久更新链接地址：http://www.linuxidc.com/Linux/2016-05/130928.htm