手机版
你好,游客 登录 注册 搜索
背景:
阅读新闻

Spark搭建环境涉及的Linux命令

[日期:2015-01-08] 来源:Linux社区  作者:stark_summer [字体: ]

Spark搭建环境涉及的Linux命令(简单易用型)

从一台服务器负责内容到另一台服务器: scp jdk-6u37-linux-x64.bin  spark@10.126.45.56:/home/spark/opt

tar压缩和解压文件:  压缩 tar -cvf  Java.tar.gz java/          解压:  tar -xvf java.tar.gz

配置java环境变量:

去各种地方下载 jdk程序包 :jdk-6u37-linux-x64.bin ,修改文件执行权限 :chmod a+x jdk-6u37-linux-x64.bin, 安装:./jdk-6u37-linux-x64.bin


编辑 vi ~/.bash_profile ,增加内容

# set  java env
export JAVA_HOME=/home/spark/opt/java/jdk1.6.0_37


export CLASSPATH=.:$JAVA_HOME/jre/lib:$JAVA_HOME/lib:$JAVA_HOME/lib/tools.jar

PATH=$PATH:$HOME/bin:$JAVA_HOME/bin

export PATH

保存并source  ~/.bash_profile

[spark@S1PA11 ~]$ ifconfig
-bash: ifconfig: command not found  --->> vi ~/.bashrc

在  一般用户的  home 目录下的 文件 .bashrc 加入
export PATH=$PATH:/sbin
然后执行
source  .bashrc  就可以执行 ifconfig 命令了。

--------------------------------------分割线 --------------------------------------

Spark1.0.0部署指南 http://www.linuxidc.com/Linux/2014-07/104304.htm

CentOS 6.2(64位)下安装Spark0.8.0详细记录 http://www.linuxidc.com/Linux/2014-06/102583.htm

Spark简介及其在Ubuntu下的安装使用 http://www.linuxidc.com/Linux/2013-08/88606.htm

安装Spark集群(在CentOS上) http://www.linuxidc.com/Linux/2013-08/88599.htm

Hadoop vs Spark性能对比 http://www.linuxidc.com/Linux/2013-08/88597.htm

Spark安装与学习 http://www.linuxidc.com/Linux/2013-08/88596.htm

Spark 并行计算模型 http://www.linuxidc.com/Linux/2012-12/76490.htm

--------------------------------------分割线 --------------------------------------

Spark 的详细介绍请点这里
Spark 的下载地址请点这里

本文永久更新链接地址http://www.linuxidc.com/Linux/2015-01/111464.htm

linux
相关资讯       Spark  Spark搭建 
本文评论   查看全部评论 (0)
表情: 表情 姓名: 字数

       

评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意内容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款