手机版
你好,游客 登录 注册 搜索
背景:
阅读新闻

Hadoop Ubuntu下的安装

[日期:2013-10-28] 来源:Linux社区  作者:Linux [字体: ]

这个是在自己笔记本上的实验版本,在不熟悉的情况还是先考虑在自己的电脑上安装一个试验版本,然后再考虑安装部署生产环境中的机器。首先自己的电脑上需要安装一个虚拟机VMWare WorkStation, 安装好了之后,再在此虚拟机上安装Ubutun操作系统,我这里装的是Ubutun 11.10, 可以通过lsb_release -a 命令查看,如果没有这个命令的话可以用下面的命令安装一下sudo apt-get install lsb。
 
    1.  在此操作系统上新建一个账号Hadoop.
 
tinyfun@Ubuntu:/home$ sudo addgroup hadoop
Adding group `hadoop' (GID 1001) ...
Done.
 
然后增加hadoop用户: sudo adduser -ingroup hadoop hadoop 之后通过sudo gedit /etc/sudoers命令在sudoers文件中添加 hadoop ALL=(ALL:ALL)  ALL 给hadoop用户root权限。机器默认的名字是ubuntu,如果需要修改的话,就用sudo gedit /etc/hostname.
 
    2. 建立ssh无密码登录
 
    首先sudo  apt-get install ssh openssh-server服务, 之后创建ssh-key, 使用命令ssh-keygen -t rsa -P ""
 
 回车后会在~/.ssh/下生成两个文件:id_rsa和id_rsa.pub这两个文件,进入~/.ssh/目录下,将id_rsa.pub追加到
 
authorized_keys授权文件中,开始是没有authorized_keys文件的, 使用命令:cat id_ras.pub >> authorized_keys中
 
接着使用ssh localhost就可以成功登录了。
 
    3. 安装hadoop
 
    在hadoop账户根目录创建一个文件夹hadoop,使用
 
wget http://mirror.bjtu.edu.cn/apache/hadoop/common/hadoop-1.1.1/hadoop-1.1.1-bin.tar.gz 下载最新版本的hadoop, 现在是1.1.1的稳定版本。解压到当前文件夹 tar -xvf hadoop-1.1.1-bin.tar.gz 然后用命令mv
 
hadoop-1.1.1 hadoop, 然后开始配置hadoop, 有四个文件需要配置的,这里采用的都是最简单的配置,很多参数都是采用hadoop系统自己默认的,这四个文件是conf目录下的,hadoop-env.sh core-site.xml hdfs-site.xml
 
mapred-site.xml.
 
    1) 修改hadoop-env.sh
 
    sudo gedit hadoop-env.sh, 将其中的一行修改为export JAVA_HOME=/usr/lib/jvm/java-6-sun-1.6.0.24
 
也就是配置Java虚拟机的运行目录,这个目录是你机器上安装java的位置。
 
    2)修改core-site.xml
 
<configuration>
    <property>
 <name>hadoop.tmp.dir</name>
        <value>/home/hadoop/hadoop/hadoop/tmp</value>
    </property>
    <property>
 <name>fs.default.name</name>
  <value>hdfs://localhost:9000</value>
    </property>
</configuration>
 
 3) 修改hdfs-site.xml
 
<configuration>
      <property>
 <name>dfs.replication</name>
 <value>1</value>
      </property>
</configuration>
 
 4)修改mapred-site.xml
 
<configuration>
      <property>
  <name>mapred.job.tracker</name>
          <value>localhost:9001</value>      </property>
</configuration> 

更多详情见请继续阅读下一页的精彩内容http://www.linuxidc.com/Linux/2013-10/92024p2.htm

相关阅读

Hadoop 2.0 安装向导 (0.23.x) http://www.linuxidc.com/Linux/2012-05/61463.htm

Hadoop 1.2.1 单节点安装(Single Node Setup)步骤 http://www.linuxidc.com/Linux/2013-08/89377.htm

CentOS上安装Hadoop http://www.linuxidc.com/Linux/2013-08/88600.htm

Ubuntu 12.04安装Hadoop http://www.linuxidc.com/Linux/2013-08/88187.htm

CentOS 6.3 x86_64安装与配置Hadoop-1.0 http://www.linuxidc.com/Linux/2013-07/87959.htm

Hadoop入门--Hadoop2伪分布式安装 http://www.linuxidc.com/Linux/2013-06/86403.htm

linux
相关资讯       Hadoop安装  Ubuntu下安装Hadoop 
本文评论   查看全部评论 (0)
表情: 表情 姓名: 字数

       

评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意内容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款