linux 下搭建 storm
搭建storm 需要搭建:
1.zookeeper 搭建
2.下载/安装 storm 的依赖包 zeromq, jzmq,python
2.storm 搭建
一、Zookeeper 安装
- 下载安装包,到桌面 soft/zookeeper
- 解压 命令 tar –xzvf zookeeper-3.4.5.tar.gz
- 解压完成之后得到一个zookeeper-3.4.5 的文件夹一路 cd到conf目录 zookeeper/conf
4.用cp 命令拷贝一个zoo_samle.cfg 为zoo.cfg
5. 然后用vi zoo.cfg命令打开编辑zoo.cfg文件
(改为自己的目录 /home/sufi/Desktop/zookeeper/zookeeper-3.4.5/data)
6. 设置环境变量
export…与截图一样就可以了
7.回到zookeeper/bin目录下,启动zookeeper服务,在bin下运行 ./zkServer.sh start即可
8.测试zookeeper
--在zookeeper/bin目录下运行 ./zkCli.sh -server 192.168.130.130 就是你的服务器和端口
--命令 ifconfig 就可以查到服务器号
二、下载安装storm 的依赖包
下载安装 zeromq
执行第四步 ./configure 的时候可能报错 (我只遇到1,2 个问题)
----输入命令: sudo
yum
install
gcc-c++ (直接复制就可以了)
运行完,再次输入 ./configure 再看一下有什么错误
----命令: sudo
yum
install
uuid-devel (同样是直接复制)
sudo
yum
install
libuuid-devel
---命令: sudo
yum
install
libtool
(直接复制)
---此错误在安装jzmq 的 ./configure 时报错 ,还是提前装好吧
安装jzmq
-----执行 git clone git://github.com/nathanmarz/jzmq.git 可能会报错,可能是网络限制
改为 git clone https://github.com/nathanmarz/jzmq.git (git-->https)
安装 Python2.7.2
wget http://www.python.org/ftp/python/2.7.2/Python-2.7.2.tgz
tar -zxvf Python-2.7.2.tgz
cd Python-2.7.2
./configure
make
make install
三、storm 安装
1.下载并解压storm
---把压缩文件放到指定目录
---tar -zxf 文件名 解压
2.修改storm.yaml配置文件
---Storm发行版本解压目录下有一个conf/storm.yaml
文件,用于配置Storm
---除了ip 地址,目录,要修改,其他保留复制就可以了
########### These MUST be filled in for a storm configuration
storm.zookeeper.servers:
- "10.3.3.244"
# - "server2"
#
nimbus.host: "10.3.3.244"
storm.local.dir: "/home/aicep/apache-storm-0.9.5/workdir"
ui.port: 8080
supervisor.slots.ports:
- 6700
- 6701
#- 6702
#- 6703
3.启动:
3.1.首先启动zookeeper ,在其安装的bin 目录下启动
--启动zookeeper:命令 : ./zKServer.sh start
--jps 命令:查看进程
3.2.启动storm
----3.2.1 启动storm主节点服务 nimbus
-- ./storm nimbus & ('&"表示在后台运行)
启动完 输入命令 # jps 看进程是否存在
----3.2.2 启动storm监控页面:监控地址:http://hostname:8080
-- ./storm ui &
-----3.2.3 启动supervisor(很不稳定,可能运行时 还要启动一次)
-- ./storm supervisor &
-----3.2.4 命令启动查看的启动的进程
3.3 检测是否搭建成功
打开浏览器 输入 192.168.130.130:8080(本虚拟机的IP+端口号)
出现页面,则成功
4.启动一个进程测试
---把storm 的java 项目打成jar 文件 我的例子的 storm_epl.jar
--右键项目-->export-->java-->javafile-->next-->..记得有一个是四个勾选的(勾 1,3)
--把storm_epl.jar 放到 storm 的安装目录下的 lib 文件夹中
--进入 lib 目录 ,启动jar 文件
./storm jar storm_epl.jar com.SimpleTopology test
1 2 3 4
--1./storm jar 固定格式,所有要启动的都是用 ./storm 这里是启动jar 包, 所以是 ./storm jar
--2(jar包的名字,若类不是直接放在 src 下的,前面应该加上包名,我是放在 com包下,所以加 com)
--3 main方法所在类的名称
--4 该进程的名称(自定义),等到执行性完 ,可以用 ./storm kill 进程名字 杀死该进程
----执行成功显示
----进入 192.168.130.130:8080 若执行成功 看到进程的状态为 Active
----回到命令 页面 杀死进程
./storm kill test
参考文档:
http://shiyanjun.cn/archives/241.html
http://www.myexception.cn/database/2045639.html
linux 下搭建 storm的更多相关文章
- MongoDB学习笔记—Linux下搭建MongoDB环境
1.MongoDB简单说明 a MongoDB是由C++语言编写的一个基于分布式文件存储的开源数据库系统,它的目的在于为WEB应用提供可扩展的高性能数据存储解决方案. b MongoDB是一个介于关系 ...
- Linux下搭建个人网站
前不久在阿里买了一个服务器,然后开始第一次尝试搭建自己的个人网站.前端采用了bootstrap框架,后端采用的是PHP,数据库使用的是Mysql.新手第一次在linux下搭建遇见很多问题,在这里分享一 ...
- Linux下搭建PHP环境
转载于: http://www.uxtribe.com/php/405.html 该站下有系列PHP文章. 在Linux下搭建PHP环境比Windows下要复杂得多.除了安装Apache,PHP等软件 ...
- Java学习心得之 Linux下搭建Java环境
作者:枫雪庭 出处:http://www.cnblogs.com/FengXueTing-px/ 欢迎转载 Java学习心得之 Linux下搭建Java环境 1.前言2.JDK安装3.配置环境变量4. ...
- Java学习心得之 Linux下搭建JavaWeb环境
作者:枫雪庭 出处:http://www.cnblogs.com/FengXueTing-px/ 欢迎转载 Java学习心得之 Linux下搭建JavaWeb环境 1. 前言2. Java安装3. t ...
- Ruby学习心得之 Linux下搭建Ruby环境
作者:枫雪庭 出处:http://www.cnblogs.com/FengXueTing-px/ 欢迎转载 Ruby学习心得之 Linux下搭建Ruby环境1.前言2.Linux下安装Ruby环境 一 ...
- Linux下搭建Lotus Domino集群
Linux下搭建Lotus Domino 集群 本文内容是Linux平台下Lotus Domino服务器部署案例(http://chenguang.blog.51cto.com/350944/1334 ...
- Linux下搭建 Cocos2d-x-2.1.4 编译环境
[tonyfield 2013.09.04 ] 参考 Linux下搭建 Cocos2d-x-2.1.4 编译环境 导入 HelloCpp 例程 1. Java 入口 HelloCpp.java Hel ...
- Linux下搭建tomcat集群全记录(转)
本文将讲述如何在Linux下搭建tomcat集群,以及搭建过程中可能的遇到的问题和解决方法.为简单起见,本文演示搭建的集群只有两个tomact节点外加一个apache组成,三者将安装在同一机器上:ap ...
随机推荐
- ubuntu 编译安装 srilm
Ubuntu 64bit系统下SRILM的配置 依赖软件包(先进行): 1.c/c++ compiler:编译器gcc 3.4.3及以上版本,我的是gcc 4.4 2.GNU make:构建和管理工程 ...
- HTML5外包
北京动点飞扬软件 从事html5外包业务五年,是国内第一家以HTML5移动平台.手机平台项目外包业务为主的正规软件团队, 欢迎联系 QQ:372900288 电话:13911652504 我们现已发展 ...
- android.view.WindowLeaked
08-30 13:17:05.645 25543-25543/com.tongyan.nanjing.subway E/WindowManager: android.view.WindowLeaked ...
- iOS8通讯录之联系人增删查,多号码增删操作
#import <AddressBook/AddressBook.h> #pragma mark 删除一个号码 - (void)deleteLocalMarkSuccess:(void(^ ...
- ruby formatting time
%Y%m%d => 20071119 Calendar date (basic) %F => 2007-11-19 Calendar date (extended) %Y-%m => ...
- php配置
在 php.ini 文件中设置 cgi.fix_pathinfo=0 ,能避免掉很多不必要的 stat() 系统调用.
- 35. Binary Tree Level Order Traversal && Binary Tree Level Order Traversal II
Binary Tree Level Order Traversal OJ: https://oj.leetcode.com/problems/binary-tree-level-order-trave ...
- Android Studio JNI/NDK 编程简介(一)
首先说一下概念及相关的东西: JNI : JNI是Java Native Interface的缩写,它提供了若干的API实现了Java和其他语言的通信(主要是C&C++).从Java1.1开始 ...
- WinCE系统深度定制汇总
WinCE应用程序崩溃提示框的处理 WinCE6.0多国语言软键盘 定制WinCE6.0标准界面的一种方法 如何禁用WinCE下的沙漏图标 Silent RNAApp.exe for WinCE6.0 ...
- JS适配问题。
动画requestAnimFrame + cancelAnimationFrame window.requestAnimFrame = (function(){ return window.reque ...