手机版
你好,游客 登录 注册 搜索
背景:
阅读新闻

Ubuntu 16.04 下 Hadoop 集群环境的安装测试PDF

[日期:2017-01-26] 来源:Linux社区  作者:Linux [字体: ]

三台 Ubuntu 16.04 虚拟机,主机名分别为 master-Hadoop 和 slaver0,slaver1

一、 配置 ssh 无密码登录:
1、 三台虚拟机(master-hadoop,slaver0,slaver1)安装 ssh 协议: apt-get install ssh
apt-get install rsync
2、master-hadoop 执行(ssh-keygen –t rsa -P “”),点击回车,生成密钥。
3、在 master-hadoop 上执行:
scp ~/.ssh/id_rsa.pub kong@slaver0:~/.ssh
scp ~/.ssh/id_rsa.pub kong@slaver1:~/.ssh
把 master-hadoop 的公钥分别复制到 slaver0、slaver1 中
4、在虚拟机上执行 cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys 进行密钥授权 5、虚拟机执行 service ssh restart 重启 ssh 服务,然后进行 ssh 测试无密码链接

二、 安装 JDK(master-hadoop、slaver0、slaver1):

下载 JDK1.7(不要用 1.8,hadoop 不能有效的支持 jdk1.8),解压到/usr/local/Java/jdk 中 配置环境变量:执行 vim /etc/profile
在 profile 最后添加上 JAVA_HOME=/usr/local/java/jdk
CLASSPATH=${JAVA_HOME}/lib:${JAVA_HOME}/jre/lib
PATH=${JAVA_HOME}/bin:$PATH
export JAVA_HOME PATH
执行 source /etc/profile
执行 java –version 验证 jdk 环境是否成功搭建

三、 安装 hadoop(master-hadoop):

Ubuntu 16.04 下 Hadoop 集群环境的安装测试PDF文件到Linux公社资源站下载:

------------------------------------------分割线------------------------------------------

免费下载地址在 http://linux.linuxidc.com/

用户名与密码都是www.linuxidc.com

具体下载目录在 /2017年资料/1月/26日/Ubuntu 16.04 下 Hadoop 集群环境的安装测试PDF/

下载方法见 http://www.linuxidc.com/Linux/2013-07/87684.htm

------------------------------------------分割线------------------------------------------

本文永久更新链接地址http://www.linuxidc.com/Linux/2017-01/139968.htm

linux
相关资讯       Hadoop集群 
本文评论   查看全部评论 (4)
表情: 表情 姓名: 字数

       

评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意内容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款
第 4 楼
* 菜鸟1号 发表于 2017/11/29 12:09:43
已解决。但是我没找到出错原因,说下做了哪些修改。一.Hadoop配置core-site.xml等文件,原来:mater的ip,修改后:mater的名称;二.Hadoop-2-7-4版本(因为官网下载时未找到Hadoop-2-7-3),没修改;三java版本,原来:1.7,修改后:1.8--之前测试jdk1.8时偷懒,没有修改slave的java版本..
第 3 楼
* 匿名 发表于 2017/11/27 12:59:27
回复 菜鸟1号 的评论
你好,请问JDK是jdk-7u80-linux-x64.tar.gz吗?我安装文档的步骤,到运行**in/start-yarn.sh时,提示"Exception in thread "main" java.lang.UnsupportedClassVersionError: org/apache/hadoop/yarn/event/EventHandler : Unsupported major.minor version 52.0"
我的虚拟机环境是系统 Ubuntu 16.10 ;hadoop-2.7.4;jdk尝试了
jdk-7u80-linux-x64.tar.gz、jdk-8u144-linux-x64.tar.gz和 sudo apt-get install openjdk-8-jre,都java -version通过。但是运行**in/start-yarn.sh时都报错UnsupportedClassVersionError
已解决。但是我没找到出错原因,说下做了哪些修改。一.Hadoop配置core-site.xml等文件,原来:mater的ip,修改后:mater的名称;二.Hadoop-2-7-4版本(因为官网下载时未找到Hadoop-2-7-4),没修改;三java版本,原来:1.7,修改后:1.8。之前测试jdk1.8时偷懒,没有修改slave的java版本..
第 2 楼
* 匿名 发表于 2017/11/27 11:54:05
回复 菜鸟1号 的评论
你好,请问JDK是jdk-7u80-linux-x64.tar.gz吗?我安装文档的步骤,到运行**in/start-yarn.sh时,提示"Exception in thread "main" java.lang.UnsupportedClassVersionError: org/apache/hadoop/yarn/event/EventHandler : Unsupported major.minor version 52.0"
我的虚拟机环境是系统 Ubuntu 16.10 ;hadoop-2.7.4;jdk尝试了
jdk-7u80-linux-x64.tar.gz、jdk-8u144-linux-x64.tar.gz和 sudo apt-get install openjdk-8-jre,都java -version通过。但是运行**in/start-yarn.sh时都报错UnsupportedClassVersionError
已解决。但是出错原因我找不到,说一下,我改的。一.hadoop配置文件core-site.xml等,原来:master的ip地址,修改后:master的名称;二.在官网下载Hadoop2-7.4(没找到Hadoop2-7.3),没改;三.java版本,原来:1.7,修改后:1.8
第 1 楼
* 菜鸟1号 发表于 2017/11/25 11:14:34
你好,请问JDK是jdk-7u80-linux-x64.tar.gz吗?我安装文档的步骤,到运行**in/start-yarn.sh时,提示"Exception in thread "main" java.lang.UnsupportedClassVersionError: org/apache/hadoop/yarn/event/EventHandler : Unsupported major.minor version 52.0"
我的虚拟机环境是系统 Ubuntu 16.10 ;hadoop-2.7.4;jdk尝试了
jdk-7u80-linux-x64.tar.gz、jdk-8u144-linux-x64.tar.gz和 sudo apt-get install openjdk-8-jre,都java -version通过。但是运行**in/start-yarn.sh时都报错UnsupportedClassVersionError