准备虚拟机:linux-rhel-7.4-server,由于不使用虚拟机进行联网,所以选择host-only网络模式.此处,需要再VitralBox的管理菜单中的主机网络管理器新建一个虚拟网卡.安装完成虚拟机之后,默认网卡是关闭的,需要进行开启,指令如下: [root@hadoop-01 network-scripts]# vi ifcfg-enp0s3 #默认网卡配置 TYPE=Ethernet PROXY_METHOD=none BROWSER_ONLY=no BOOTPROTO=dhcp…

解压缩hbase二进制安装文件到/opt目录下: #tar -zxvf hbase-0.98.6-cdh5.3.6.tar.gz -C /opt/cdh-5.3.6/ 编辑配置文件,这里仅配置数据目录,如果不指定数据目录,默认hbase数据存储在/tmp目录下: #vim conf/hbase-site.xml <property>         <name>hbase.rootdir</name>         <value>file:///opt/h…

本地模式安装部署 1．安装前准备 (1)安装Jdk (2)拷贝Zookeeper安装包到Linux系统下 (3)解压到指定目录 tar -zxvf zookeeper-3.4.10.tar.gz -C /opt/app/ 2．配置修改 (1)将/opt/app/zookeeper-3.4.10/conf这个路径下的zoo_sample.cfg修改为zoo.cfg: $ mv zoo_sample.cfg zoo.cfg (2)打开zoo.cfg文件,修改dataDir路径: $ vim zoo.…

Hadoop生态圈-Kafka的本地模式部署 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 一.Kafka简介 1>.什么是JMS 答:在Java中有一个角消息系统的东西,我们叫他Java Message Service,简称JMS.比如各种MQ. 2>.JMS的两种工作模式 第一种模式:点到点(point to point,简称P2P),典型的一对一模式(一个人发送数据的同时只有一个人接收数据),也有人称之为端到端(peer to peer). 第二种模式:发布订阅模式(…

0. 说明 本地模式:使用的存储系统,是Linux系统 提前安装好 JDK 参考 CentOS7 安装 JDK 1. 将 Hadoop 的安装包通过 Xftp 发送到centos 用户的 home 目录 2. 解压安装包到 /soft下 tar -xzvf hadoop-2.7.3.tar.gz -C /soft 3. 进入到 /soft 下,建立符号链接 cd /soft ln -s hadoop-2.7.3/ hadoop 4. 配置 Hadoop 环境变量 sudo vim /etc/pr…

What  is  Zookeeper 是一个开源的分布式的,为分布式应用提供协作服务的Apache项目 提供一个简单的原语集合,以便与分布式应用可以在他之上构建更高层次的同步服务 设计非常简单易于编程,他使用的是类似于文件系统那样的树形数据结构. 目的就是将分布式服务不再需要有协作冲突而另外实现协作服务 从设计模式角度来看,是一个基于观察者设计模式的分布式服务管理框架. 先将节点上的服务都停止掉 在节点一上执行命令:sbin/stop-dfs.sh 然后在节点二上执行命令:  sbin/sto…

操作系统:centos6.6(一台服务器) 环境:selinux disabled:iptables off:java 1.8.0_131 安装包:hadoop-2.5.0.tar.gz hadoop的本地模式部署(适用于本地开发调试模式) 1.新建安装目录 #mkdir /data/hadoop/hadoopstandalone -p 2.解压压缩包 #tar  zxvf  hadoop-2.5.0.tar.gz -C /data/hadoop/hadoopstandalone/ 3.运行ha…

最近在学习hadoop,第一步当然是亲手装一下hadoop了. 下面记录我hadoop安装的过程: 注意: 1,首先明确hadoop的安装是一个非常简单的过程,装hadoop的主要工作都在配置文件上,因此最最重要的一点就是需要了解hadoop每个配置项的具体含义! (今天时间关系,先把我的安装过程记录下来,关于每一步的配置具体表示什么意思,有时间详细写出来) 2,官方文档是最好的帮助文件,如果你的英语过关,希望多去看官方的文档:如果你的英语很烂,也可以去上面看着练习一下英语,耶! 3,本人比较懒…

本地模式不用考虑hadoop的版本,所以直接下载 binary 包或者自己编译 1.配置主机名.JDK.关闭防火墙.关闭Selinux.配置hosts ... ... 2.设置本机SSH免密码登陆 ... ... 3.如果是用root用户,则忽略,如果是专门的用户,则把它加入suders 4.解压 ... ... 5.配置tachyon的环境变量 ... ... 6.进入$TACHYON_HOME/conf下 mv tachyon-env.sh.template tachyon-env.sh v…

今天闲来无事想起了node.js,因此到网上下载了一个node.js的安装程序进行安装.其中: 安装程序:node-v0.11.13-x64.msi PC系统:Windows 7 自定义安装路径:D:\TOOLS\NodeJs 安装完成后,执行: D:\TOOLS\NodeJs>node -v v0.11.13 安装框架express,从网站上下载了一个安装文档,说安装express可分全局模式和本地模式,个人觉得全局模式就是默认的没什么意思,就选择本地模式进行安装,执行: D:\TOOLS\N…