你好,游客 登录 注册 搜索
阅读内容

Spring XD

运行环境:
授权方式:BSD
软件大小:M
下载量:
更新日期:2014-10-04
来源地址:
联系作者:Linux

Spring XD 是一个统一的,分布式,可扩展的系统用于数据摄取,实时分析,批量处理和数据导出。该项目的目标是简化大数据应用的开发。简化了解决通用大数据问题,例如数据的摄入和导出、实时的分析和批工作量编排的功能。

建立真实世界的大数据的应用程序的大部分复杂性是在于将许多不同的系统为一个完整的,在一个范围内的使用情况。创建一个综合的大数据中常见的用例是高吞吐量的分布式数据的从各种输入源为大数据存储诸如HDFS或splunk收集  在收集时进行实时分析,例如采集数据和计算值  通过批处理进行工作流程管理。 这些工作将通过标准企业系统(RDBMS)和Hadoop操作(MapReduce,HDFS,Pig,Hive or Cascading(流注)整合在一起。

Spring XD 下载及安装

下载Spring XD

http://repo.spring.io/simple/libs-milestone-local/org/springframework/xd/spring-xd/1.0.0.M4/spring-xd-1.0.0.M4-dist.zip

解压,这将产生的安装目录spring-xd-1.0.0.m2。

cp spring-xd-1.0.0.M4-dist.zip /opt/
cd /opt/
unzip spring-xd-1.0.0.M4-dist.zip
drwxr-xr-x  7 root  root        4096 Nov 12 13:39 spring-xd-1.0.0.M4/
$ cd spring-xd-1.0.0.M2

设置环境变量
Set the environment variable XD_HOME to the installation directory \spring-xd\xd
vi /etc/profile
export XD_HOME=/opt/spring-xd-1.0.0.M4/xd
source /etc/profile
root@linuxidc:/etc# echo $XD_HOME
/opt/spring-xd-1.0.0.M4/xd

安装 Spring XD
启动命令
chmod -R 777 spring-xd-1.0.0.M4
xd/bin>$ ./xd-singlenode

启动后会看的
INFO: Starting Servlet Engine: Apache Tomcat/7.0.35
XD Configuration:
        XD_HOME=/opt/spring-xd-1.0.0.M4/xd
        XD_TRANSPORT=local
        XD_STORE=memory
        XD_ANALYTICS=memory
        XD_HADOOP_DISTRO=hadoop12

在一个单独的终端 cd into the shell directory and start the XD shell, which you can use to issue commands.

cd /opt/spring-xd-1.0.0.M4/shell/bin
shell/bin>$ ./xd-shell
在spring XD中,基本流定义了事件驱动的源数据到一个接收器的摄取过程通过任意数量的处理器 。

linux
相关资讯       Spring XD 
本文评论   查看全部评论 (0)
表情: 表情 姓名: 字数

       

评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意内容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款