Storm1.0.3集群部署
Storm集群部署
所有集群部署的基本流程都差不多:下载安装包并上传、解压安装包并配置环境变量、修改配置文件、分发安装包、启动集群、查看集群是否部署成功。
1、所有的集群上都要配置hosts
vi /etc/hosts
192.168.33.201 storm1 hadoop1 zk1
192.168.33.202 storm2 hadoop2 zk2
192.168.33.203 storm3 hadoop3 zk3
2、集群部署的基础环境准备
安装前,zookeeper集群已经部署完毕!!!
创建工作目录并赋权(三台机器都要创建)
mkdir /export
mkdir /export/servers
chmod 755 -R /export
3、下载安装包并上传
从官网下载http://storm.apache.org/。 下载好了将安装包上传(alt+P)。
4、解压安装包并配置环境变量
tar -zxvf apache-storm-1.0.3.tar.gz -C /export/servers
cd /export/servers/
ln -s apache-storm-1.0.3 storm
---ln -s 源文件 目标文件:创建软连接
---当我们需要在不用的目录,用到相同的文件时,我们不需要再每一个需要的目录下都放一个必须相同的文件。我们只要在某个固定的目录,放上该文件,
然后在其他的目录下用ln 命令链接它就可以了。不必重复占用磁盘空间!
配置环境变量:
export STORM_HOME=/export/servers/apache-storm-1.0.3
export PATH=.:$STORM_HOME/bin:$...
配置完source /etc/profile
将profile文件拷贝到其他两台机器上
scp /etc/profile storm2:/etc/
scp /etc/profile storm3:/etc/
拷贝完成后都要刷新环境变量source /etc/profile
5、修改配置文件
vi /export/servers/storm/conf/storm.yaml
输入一下内容:
6、分发安装包
scp -r /export/servers/apache-storm-1.0.3 storm2:/export/servers
scp -r /export/servers/apache-storm-1.0.3 storm3:/export/servers
然后分别在storm2、storm3上创建软连接
cd /export/servers/
ln -s apache-storm-1.0.3 storm
7、启动集群(要先启动zookeeper集群!!!)
(1)在nimbus.host所属的机器上storm1启动nimbus服务:
cd /export/servers/storm/bin/
nohup ./storm nimbus &
---nohup命令:不挂断地运行命令。原程序的标准输出被自动改向到当前目录下的nohup.out文件,起到了log的作用。nohup ./storm nimbus & 后台启动 storm nimbus 前台启动
(2)在nimbus.host所属的机器上storm1启动ui服务:
cd /export/servers/storm/bin/
nohup ./storm ui &
(3)在其他各节点上storm2和storm3启动supervisor服务:
cd /export/servers/storm/bin/
nohup ./storm supervisor &
8、查看集群是否部署成功
访问http://storm1:8080/,即可看到storm的ui界面。
Storm1.0.3集群部署的更多相关文章
- hbase-2.0.4集群部署
hbase-2.0.4集群部署 1. 集群节点规划: rzx1 HMaster,HRegionServer rzx2 HRegionServer rzx3 HRegionServer 前提:搭建好ha ...
- redis3.0.5集群部署安装详细步骤
Redis集群部署文档(centos6系统) (要让集群正常工作至少需要3个主节点,在这里我们要创建6个redis节点,其中三个为主节点,三个为从节点,对应的redis节点的ip和端口对应关系如下) ...
- 1--redis3.0.5集群部署安装详细步骤
Redis集群部署文档(centos6系统) (要让集群正常工作至少需要3个主节点,在这里我们要创建6个redis节点,其中三个为主节点,三个为从节点,对应的redis节点的ip和端口对应关系如下) ...
- redis-5.0.5 集群部署
之前写过一套基于redis-4.0.6版本的测试集群部署 https://www.cnblogs.com/mrice/p/10730309.html 最近生产环境需要部署一套redis-5.0.5版本 ...
- redis 3.0的集群部署
转载请注明出处:http://hot66hot.iteye.com/admin/blogs/2050676 最近研究redis-cluster,正好搭建了一个环境,遇到了很多坑,系统的总结下,等到re ...
- (转)redis 3.0的集群部署
一:关于redis cluster 1:redis cluster的现状 reids-cluster计划在redis3.0中推出,可以看作者antirez的声明:http://antirez.com/ ...
- redis3.0.7集群部署手册
1.用root登录主机2.将redis-3.0.7.tar.gz传送到主机3.将rubygems-update-2.5.2.gem,redis-3.0.0.gem传送到主机4.解压redis-3.0. ...
- linux下redis4.0.2集群部署(利用Ruby脚本命令)
一.原生命令方式和Ruby脚本方式区别 利用Ruby脚本部署和用原生命令部署,节点准备的步骤都是一样的,节点启动后的握手,以及主从.槽分配,利用Ruby脚本一步就能完成,利用原生命令需要一步一步地执行 ...
- linux下redis4.0.2集群部署(利用原生命令)
一.部署架构如下 每台服务器准备2个节点,一主一从,主节点为另外两台其中一台的主,从节点为另外两台其中一台的从. 二.准备6个节点配置文件 在172.28.18.75上操作 cd /etc/redis ...
随机推荐
- 导致 KEIL error #20 的一种情况
> 描述 <+> 环境为 KEIL5.20 & STM32F429工程,平台为 win10 <+> 结构体原形如下 @File <A.h> #incl ...
- [学习笔记]插头dp
基于连通性的状压dp 巧妙之处:插头已经可以表示内部所有状态了. 就是讨论麻烦一些. 简介 转移方法:逐格转移,分类讨论 记录状态方法:最小表示法(每次要重新编号,对于一类没用“回路路径”之类的题,可 ...
- JAVA字符串格式化-String.format()的使用 【生成随机数补0操作】
转: JAVA字符串格式化-String.format()的使用 常规类型的格式化 String类的format()方法用于创建格式化的字符串以及连接多个字符串对象.熟悉C语言的同学应该记得C语言的s ...
- adb logcat介绍
logcat命令语法: [adb] logcat [<option>] ... [<filter-spec>] ... adb logcat -c 清除所有以前的日志 adb ...
- JAVA-Servlet高级应用
会话只是指一段指定的时间间隔. 会话跟踪是维护用户状态(数据)的一种方式.它也被称为servlet中的会话管理. Http协议是一个无状态的,所以我们需要使用会话跟踪技术来维护用户状态. 每次用户请求 ...
- POJ-3295 Tautology (构造)
https://vjudge.net/problem/POJ-3295 题意 有五种运算符和五个参数,现在给你一个不超过100字符的算式,问最后结果是否恒为1? 分析 首先明确各运算符的意义,K(&a ...
- ASP.NET MVC学习笔记-----Filter(2)
接上篇ASP.NET MVC学习笔记-----Filter(1) Action Filter Action Filter可以基于任何目的使用,它需要实现IActionFilter接口: public ...
- 浅谈 JSON 那些被转义的字符们
其实,之前我一直以为 JSON 会把 ASCII 可显示字符以外的统统转义为 Unicode,直到有一次我用 JSON.stringify 才发现,其实是 PHP 为我们想的太周到了. 我以前是一位 ...
- [整理]html5 WebApp 01
在正式进入WebApp开发之前,有几个问题要解决: 1.我是产品策划:UI风格,功能设计,产品预期效果(如访问量等各类指标) 2.我是UI设计:图片图标制作,我该按怎样的大小来设计? 3.我是前端开发 ...
- XMPP用户登录
CHENYILONG Blog XMPP用户登录 技术博客http://www.cnblogs.com/ChenYilong/ 新浪微博http://weibo.com/luohanchenyilon ...