你好,游客 登录 注册 搜索
背景:
阅读新闻

Ubuntu 14.04.4 下 Hadoop环境搭建安装

[日期:2016-05-03] 来源:Linux社区  作者:young_so_nice [字体: ]

Ubuntu 14.04.4 下 Hadoop环境搭建安装

一,准备环境:
1,64位ubuntu-14.04.4
2,jdk-7u80-linux-x64

二,配置jdk:
1,输入命令语句:
这里写图片描述
2,写入配置信息:
这里写图片描述
3,使配置信息起作用: 
这里写图片描述
4,jdk搭建成功:
这里写图片描述
三,hadoop的配置:
1,解压hadoop:
hadoop@master:/mysoftware$ tar -zxvf hadoop-2.6.4.tar.gz
2,修改hadoop-env.sh
这里写图片描述
这里写图片描述
3,修改core-site.xml:
这里写图片描述

    <configuration>
    <property> 
        <name>fs.defaultFS</name> 
        <value>hdfs://master:9000</value> 
    </property> 
    <property> 
        <name>hadoop.tmp.dir</name> 
        <value>file:/mysoftware/hadoop-2.6.4/tmp</value>
    </property>
    <property>
        <name>hadoop.native.lib</name>
        <value>false</value>
    </property>
 </configuration>

4.修改hdfs-site.xml:
这里写图片描述

<configuration>
    <property> 
        <name>dfs.replication</name> 
        <value>1</value> 
    </property> 
    <property>
        <name>dfs.namenode.name.dir</name>
        <value>file:/mysoftware/hadoop-2.6.4/dfs/name</value>
    </property>
    <property>
        <name>dfs.datanode.data.dir</name>
        <value>file:/mysoftware/hadoop-2.6.4/dfs/data</value>
    </property>
    <property>
        <name>dfs.permissions</name>
        <value>false</value>
    </property>
 </configuration>

5,修改mapred-site.xml:
这里写图片描述

<configuration>
    <property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
    </property>
</configuration>

6,修改yarn-site.xml:
这里写图片描述

<configuration>
    <property>
        <description>The hostname of the RM.</description> 
        <name>yarn.resourcemanager.hostname</name> 
        <value>master</value> 
    </property> 
    <property> 
        <name>yarn.nodemanager.aux-services</name> 
        <value>mapreduce.shuffle</value> 
    </property>
</configuration>

7,创建文件夹:
这里写图片描述

8,修改权限:
这里写图片描述

9,修改hostsname:
这里写图片描述

10,修改主机信息:
这里写图片描述
用#号注释以前的主机名,配上虚拟机的IP及名字:
这里写图片描述

11,格式化hadoop:
hadoop@master:/mysoftware/hadoop-2.6.4$ bin/hdfs namenode -format
显示下面的信息,则成功:
这里写图片描述

12,启动hadoop:
hadoop@master:/mysoftware/hadoop-2.6.4$ sbin/start-dfs.sh

输入:hadoop@master:/mysoftware/hadoop-2.6.4$ jps
这里写图片描述
看到这5个进程就表示成功。
对了这里装的是伪分布式的。

下面关于Hadoop的文章您也可能喜欢,不妨看看:

Ubuntu14.04下Hadoop2.4.1单机/伪分布式安装配置教程  http://www.linuxidc.com/Linux/2015-02/113487.htm

CentOS安装和配置Hadoop2.2.0  http://www.linuxidc.com/Linux/2014-01/94685.htm

Ubuntu 13.04上搭建Hadoop环境 http://www.linuxidc.com/Linux/2013-06/86106.htm

Ubuntu 12.10 +Hadoop 1.2.1版本集群配置 http://www.linuxidc.com/Linux/2013-09/90600.htm

Ubuntu上搭建Hadoop环境(单机模式+伪分布模式) http://www.linuxidc.com/Linux/2013-01/77681.htm

Ubuntu下Hadoop环境的配置 http://www.linuxidc.com/Linux/2012-11/74539.htm

单机版搭建Hadoop环境图文教程详解 http://www.linuxidc.com/Linux/2012-02/53927.htm

更多Hadoop相关信息见Hadoop 专题页面 http://www.linuxidc.com/topicnews.aspx?tid=13

本文永久更新链接地址http://www.linuxidc.com/Linux/2016-05/130928.htm

linux
本文评论   查看全部评论 (0)
表情: 表情 姓名: 字数

       

评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意��容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款