基于Hadoop集群搭建Hive安装与配置(yum插件安装MySQL)---linux系统《小白篇》
用到的安装包有:
apache-hive-1.2.1-bin.tar.gz
mysql-connector-java-5.1.49.tar.gz
百度网盘链接:
链接:https://pan.baidu.com/s/1VU9rBPm9c_LE3llqvp8qZw
提取码:zjhz
前提条件 :搭建好Hadoop集群
建议:初学者初步安装看多看一下文中的建议。
一.MySQL安装
前提:必须卸载干净MySQL
- 首先用命令更新系统
Centos 的安装命令
sudo yum update
Ubantu的安装命令
apt-get update
2.下载相应 rpm 包:
wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpm
3.升级安装
rpm -ivh mysql-community-release-el7-5.noarch.rpm
4.用插件安装mysql-server和mysql-client
Centos中的yum插件
yum install mysql-server mysql-client
5.Ubantu的安装命令
apt-get install mysql-server mysql-client
6.启动MySQL服务
service mysql restart
7.MySQL查看服务是否启动
ps –ef|grep mysql
8.登录MySQL(默认密码是为空的,输入密码时回车就好)
mysql –u root –p
9.修改MySQL的密码(建议:密码和我的一样,后面还有hive-site.xml配置)
mysql> use mysql;
mysql> UPDATE user SET password=password("1234") WHERE user='root';
mysql> exit;
注意:如果Mysql的版本是5.7及以上的话update语句如下:
mysql> update user set authentication_string=passworD("1234") where user='root';
10.退出重启服务并登录
service mysql restart
mysql> use mysql
select User, Host from user;
分别执行一下命令
mysql> update user set User=”roots” where Host=”127.0.0.1”;
mysql> update user set Host="%" where User="roots";
mysql> update user set User="root" where Host="%";
二、HIve安装配置
安装过程:

1.上传(Xshell)到root目录下rz命令上传
以下命令时在文件所在目录下执行按顺序执行
我的文件安排时将hive安装在/usr/local下
tar -zxvf apache-hive-1.2.1-bin.tar.gz
mv apache-hive-1.2.1-bin hive
cd mysql-connector-java-5.1.49
mv mysql-connector-java-5.1.49.tar.gz /usr/local/hive/lib/(该步骤就是上次mysqljar包)
建议:该操作是将hive文件解压然后放在指定的目录下(我是放在/usr/local下),建议小白和我安装位置相同,以为后面要配置hive-site.xml中的参数。
2. 配置项
cd /usr/local/hive/conf
cp hive-default.xml.template hive-site.xml
vim hive-site.xml
查找(注意一定要在编辑模式查找(按esc键),不要在插入模式查找)
/javax.jdo.option.ConnectionURL


更改value值
jdbc:mysql://master:3306/hive?createDatabaseIfNotExist=true
注意:这一步时mysql版本是5.7或5.7以上的版本的需要操作,其他版本不要操作
/javax.jdo.option.ConnectionDriverName
改jc

这步是要配置的
/javax.jdo.option.ConnectionUserName
Value 改为root

操作这步的意思是用root用户去登录hive
/javax.jdo.option.ConnectionPassword
改value的值为为1234(这是我前面设置的密码,你们也要对应你们的密码)
对应前面

分别查找
/${system:java.io.tmpdir}改为对应hive的目录(我的目录是/usr/local/hive)
文件中所用${system:java.io.tmpdir}改为/usr/local/hive
/${system:user.name}
文件中所用${system:user.name}改为${user.name}
到这里hive-site.xml就配置完成了
接下来配置hive-env.sh
cp hive-env.sh.template hive-en.sh
修改下面HADOOP_HOME并把注释去掉(就是去掉前面#)
改如下图(目录是对应得Hadoop安装路径)

到此就配置完成hive-env.sh文件了,hive的配置文件也就是配置完成了
3.复制Hadoop配置文件到hive目录下的conf目录下
cd etc/hadoop(这是我Hadoop安装路径)
cp core-site.xml /usr/local/hive/conf/
cp hdfs-site.xml /usr/local/hive/conf/
4.启动hive
service mysql restart 启动mysql服务
start-all.sh 启动集群
cd /usr/local/hive/bin 进入hive/bin目录下
./hive 启动hive
基于Hadoop集群搭建Hive安装与配置(yum插件安装MySQL)---linux系统《小白篇》的更多相关文章
- 大数据 --> Hadoop集群搭建
Hadoop集群搭建 1.修改/etc/hosts文件 在每台linux机器上,sudo vim /etc/hosts 编写hosts文件.将主机名和ip地址的映射填写进去.编辑完后,结果如下: 2. ...
- Hadoop集群搭建-02安装配置Zookeeper
Hadoop集群搭建-05安装配置YARN Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hado ...
- Hadoop集群搭建安装过程(三)(图文详解---尽情点击!!!)
Hadoop集群搭建安装过程(三)(图文详解---尽情点击!!!) 一.JDK的安装 安装位置都在同一位置(/usr/tools/jdk1.8.0_73) jdk的安装在克隆三台机器的时候可以提前安装 ...
- Hadoop集群搭建安装过程(二)(图文详解---尽情点击!!!)
Hadoop集群搭建安装过程(二)(配置SSH免密登录)(图文详解---尽情点击!!!) 一.配置ssh无密码访问 ®生成公钥密钥对 1.在每个节点上分别执行: ssh-keygen -t rsa(一 ...
- Hadoop集群搭建安装过程(一)(图文详解---尽情点击!!!)
Hadoop集群搭建(一)(上篇中讲到了Linux虚拟机的安装) 一.安装所需插件(以hadoop2.6.4为例,如果需要可以到官方网站进行下载:http://hadoop.apache.org) h ...
- Hadoop集群搭建-05安装配置YARN
Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hadoop集群搭建-01前期准备 先保证集群5台虚 ...
- Hadoop集群搭建-04安装配置HDFS
Hadoop集群搭建-05安装配置YARN Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hado ...
- Hadoop集群搭建-03编译安装hadoop
Hadoop集群搭建-05安装配置YARN Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hado ...
- Linux环境下Hadoop集群搭建
Linux环境下Hadoop集群搭建 前言: 最近来到了武汉大学,在这里开始了我的研究生生涯.昨天通过学长们的耐心培训,了解了Hadoop,Hdfs,Hive,Hbase,MangoDB等等相关的知识 ...
随机推荐
- C. 【例题3】畜栏预定
C . [ 例 题 3 ] 畜 栏 预 定 C. [例题3]畜栏预定 C.[例题3]畜栏预定 题解 考虑贪心 Code #include <bits/stdc++.h> using nam ...
- C#异步编程由浅入深(二)Async/Await的作用.
考虑到直接讲实现一个类Task库思维有点跳跃,所以本节主要讲解Async/Await的本质作用(解决了什么问题),以及Async/Await的工作原理.实现一个类Task的库则放在后面讲.首先回顾 ...
- Python的flask接收前台的ajax的post数据和get数据
ajax向后台发送数据: ①post方式 ajax: @app.route("/find_worldByName",methods=['POST']) type:'post', d ...
- Recoil 中多级数据联动及数据重置的合理做法
前情回顾 书接上回,前面引出了在数据存在级联的情况下,各下拉框之间的默认值及值变化的处理.简单回顾一下: 场景是: 地域下拉决定可选的可用区 默认选中第一个地域,通过设置 atom 的 default ...
- MySQL提升笔记(3)日志文件详解
在MySQL数据库和InnoDB存储引擎中,有很多种文件,如:参数文件.日志文件.socket文件.pid文件.MySQL表结构文件.存储引擎文件. 本节重点关注日志文件,MySQL的复制.事务等重要 ...
- 下载kaggle数据集的小妙招
kaggle是很多数据分析和机器学习初学者非常喜爱的数据科学竞赛平台. 这个平台上有很多接近现实业务场景的数据集,非常适合练手. 今天向大家推荐一个下载kaggle数据集的小工具--kaggleAPI ...
- C# Linq 延迟查询的执行
在定义linq查询表达式时,查询是不会执行,查询会在迭代数据项时运行.它使用yield return 语句返回谓词为true的元素. var names = new List<string> ...
- 附034.Kubernetes_v1.21.0高可用部署架构二
kubeadm介绍 kubeadm概述 Kubeadm 是一个工具,它提供了 kubeadm init 以及 kubeadm join 这两个命令作为快速创建 kubernetes 集群的最佳实践. ...
- 死磕Spring之AOP篇 - Spring AOP自动代理(三)创建代理对象
该系列文章是本人在学习 Spring 的过程中总结下来的,里面涉及到相关源码,可能对读者不太友好,请结合我的源码注释 Spring 源码分析 GitHub 地址 进行阅读. Spring 版本:5.1 ...
- redhat7.6 安装java和tomcat
使用yum 安装java # 首先查看是否安装yum rpm -qa | grep yum yum-3.4.3-161.el7.noarch # 显示这个表示已经安装了. # 查看是否安装java,没 ...