手机版
你好,游客 登录 注册
背景:
阅读新闻

单机版搭建Hadoop环境图文教程详解

[日期:2012-02-11] 来源:Linux社区  作者:weixiaolu [字体: ]

8、打开conf/mapred-site.xml文件,编辑如下:

  1. <?xml version="1.0"?>   
  2. <?xml-stylesheet type="text/xsl" href="configuration.xsl"?>   
  3.   
  4. <!-- Put site-specific property overrides in this file. -->   
  5.   
  6.     <configuration>     
  7.      <property>      
  8.       <name>mapred.job.tracker</name>     
  9.       <value>localhost:9001</value>      
  10.      </property>     
  11.     </configuration>    

9、打开conf/hdfs-site.xml文件,编辑如下:

  1. <configuration>   
  2. <property>   
  3. <name>dfs.name.dir</name>   
  4. <value>/usr/local/Hadoop/datalog1,/usr/local/hadoop/datalog2</value>   
  5. </property>   
  6. <property>   
  7. <name>dfs.data.dir</name>   
  8. <value>/usr/local/hadoop/data1,/usr/local/hadoop/data2</value>   
  9. </property>   
  10. <property>   
  11. <name>dfs.replication</name>   
  12. <value>2</value>   
  13. </property>   
  14. </configuration>  

10、打开conf/masters文件,添加作为secondarynamenode的主机名,作为单机版环境,这里只需填写localhost就Ok了。

11、打开conf/slaves文件,添加作为slave的主机名,一行一个。作为单机版,这里也只需填写localhost就Ok了。

八、在单机上运行hadoop

1、进入hadoop目录下,格式化hdfs文件系统,初次运行hadoop时一定要有该操作,如图(21)

 

 

当你看到下图时,就说明你的hdfs文件系统格式化成功了。

 

 

3、启动bin/start-all.sh,如图(23)

 

 

4、检测hadoop是否启动成功,如图(24)

 

 

如果有Namenode,SecondaryNameNode,TaskTracker,DataNode,JobTracker五个进程,就说明你的hadoop单机

版环境配置好了,呵呵,多么宏伟的工程呀!

九、 Linux下的快捷键:
Ctrl+Alt+t:弹出终端
Ctrl+空格:中英文输入法切换

十、Hadoop执行WordCount程序,见 http://www.linuxidc.com/Linux/2012-02/54529.htm

linux
本文评论   查看全部评论 (3)
表情: 表情 姓名: 字数

       

评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意内容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款
第 3 楼
* xierui4056会员 发表于 2016/1/17 10:33:38
不错,学习了
第 2 楼
* 匿名 发表于 2013/10/23 13:50:03
没有datanode是怎么回事啊。。
第 1 楼
* 匿名 发表于 2013/3/25 14:09:38
3