压缩包下载http://www.cnblogs.com/bfmq/p/6027202.html 1.zookeepermkdir /usr/local/hadooptar zxf /root/zookeeper-3.5.2-alpha.tar.gzmv /root/zookeeper-3.5.2-alpha /usr/local/hadoop/vim /etc/profile追加(java要预先装好)JAVA_HOME=/usr/java/jdk1.7.0_80/ZOOKEEPER_HOME=/…

一.版本建议 Centos V7.5 Java V1.8 Hadoop V2.7.6 Hive V2.3.3 Mysql V5.7 Spark V2.3 Scala V2.12.6 Flume V1.80 Sqoop V1.4.5 二.Hadoop JDK地址: http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html Hadoop地址: http://hadoop.apache.org…

一.环境准备 1.1.机器规划 主机名    别名    IP     角色 9321a27a2b91 hadoop1 172.17.0.10 NN1 ZK RM 7c3a3c9cd595 hadoop2 172.17.0.9 NN2 ZK RM JOBHIS f89eaf2a2548 hadoop3 172.17.0.8 DN ZK ND 28620eee1426 hadoop4 172.17.0.7 DN QJM1 ND ae1f06bd04c8 hadoop5 172.17.0.6 DN…

下载和解压安装文件 基础环境和安装准备 Hive组件的部署规划和软件包路径如下: (1)当前环境中已安装 Hadoop全分布系统 (2)本地安装 MySQL数据库(账号 root,密码 Password123$),软件包在/opt/software/mysql-5.7.18路径下 (3)MySQL端口号(3306) (4)MySQL的 JDBC驱动包/opt/software/mysql-connector-java-5.1.47.jar,在此基础上更新 Hive元数据存储 (5)Hive软件包…

一.软件版本 Hadoop版本号:hadoop-2.6.0.tar: VMWare版本号:VMware-workstation-full-11.0.0-2305329 Ubuntu版本号:ubuntu-14.04.1-desktop-i386 其他版本也可 Jdk版本号:jdk-6u45-linux-i586.bin 后三项对版本要求不严格,如果使用Hbase1.0.0版本,需要JDK1.8以上版本. 二.安装教程 1.VMWare安装教程 VMWare虚拟机是个软件,安装后可用来创建虚拟机,在…

云计算介绍 当用户能够通过互联网方便的获取到计算.存储等服务时,我们比喻自己使用到了“云计算”,云计算并不能被称为是一种计算技术,而更像是一种服务模式.每个运维人员心里都有一个对云计算的理解,而最普遍接受的是NIST(美国国家标准与技术研究院)的定义: 云计算是一种按使用量付费的服务模式,这是一种能够提供可用的.便捷的.按需求的网络访问模式,计算共享池能够快速的为用户提供网络.服务器.存储.应用软件及其他服务,并且只需要花费很少的管理时间. 服务层次 NIST还针对于云计算的服务模式提出了3个服…

域名解析 vim /etc/hosts 192.168.245.172 controller01 192.168.245.171 controller02 192.168.245.173 controller03 配置源码 配置 dns 全局解释器: vim /etc/resolv.conf nameserver 192.168.254.251            #连接learn.yunwei.edu的内网nameserver 223.5.5.5 wget http://download2.…

一.软件版本 Hadoop版本号:hadoop-2.6.0.tar: VMWare版本号:VMware-workstation-full-11.0.0-2305329 Ubuntu版本号:ubuntu-14.04.1-desktop-i386 其他版本也可 Jdk版本号:jdk-6u45-linux-i586.bin 后三项对版本要求不严格,如果使用Hbase1.0.0版本,需要JDK1.8以上版本. 二.安装教程 1.VMWare安装教程 VMWare虚拟机是个软件,安装后可用来创建虚拟机,在…

React性能优化记录(不定期更新) 1. 使用PureComponent代替Component 在新建组件的时候需要继承Component会用到以下代码 import React,{Component} from 'react'; import {connect} from 'react-redux'; class Item extends Comonent{ render(){} } '''' export default connect(''',''')(Item); 如果使用了react…

目录 不定期更新的IDEA功能整理 idea 命令 Preferences 和 Project Structure Keymap HTTP Proxy Postfix Completion 插件 插件推荐 不定期更新的IDEA功能整理 简单整理一下IDEA里自己常用的一些功能,不会写的太详细. 这里略过下载和安装.第一次安装打开后,建议不要把Tip of the Day的Show tips on startup这里的勾点掉,每天启动之后翻一翻,说不定能发现一些好用的功能. idea 命令 先从启…