hive的使用01
1.安装mysql数据库
1.1 查看本机是否安装了mysql数据库(rpm -qa | grep mysql)
1.2 删除系统自带的mysql数据库(rpm -e --nodeps mysql-libs-5.1.66-2.el6_3.x86_64)
1.3 解压mysql.zip文件,并添加执行权限(使用unzip命令进行解压.zip文件,)
1.4 安装mysql服务端(使用rpm -ivh 安装.rpm文件)
当安装完之后会有以下提示,有个随机的密码放入了/root/.mysql_secret文件中
启动mysql服务端
1.4 安装mysql客户端并修改root用户的密码
连接到mysql服务器
修改root用户的密码为root,并退出后重新使用root的新密码登录
1.5 修改mysql运行登录的主机
刷新mysql的权限策略
2.安装hive,并将元素数放在mysql数据库中
2.1 将mysql驱动jar放到hive安装目录下的lib目录中
2.2 修改/opt/modules/hive-0.13.1-bin/conf/hive-env.sh文件,设置hadoop安装目录和hive配置目录
2.3 配置hive元数据所在的数据库,修改/opt/modules/hive-0.13.1-bin/conf/hive-site.xml(如果不存在,则进行创建)
<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
<!---mysql连接-->
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://life-hadoop.life.com:3306/metastore?createDatabaseIfNotExist=true</value>
</property>
<!--mysql驱动-->
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<!--连接mysql的用户名-->
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
</property>
<!--连接mysql的密码-->
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>root</value>
</property>
<!--命令行客户端打印时是否显示列头信息-->
<property>
<name>hive.cli.print.header</name>
<value>true</value>
</property>
<!--命令行客户端打印时是否显示数据库名信息-->
<property>
<name>hive.cli.print.current.db</name>
<value>true</value>
</property>
</configuration>
2.4 修改hive的日志文件所在的目录,修改/opt/modules/hive-0.13.1-bin/hive-log4j.properties文件
2.5 创建hive表数据所在的文件夹
在hdfs上创建 /tmp 和 /user/hive/warehouse目录,并赋予g+w的权限
2.6 查看是否配置成功
启动hive客户端
查看mysql数据库
3.hive操作
3.1 基本操作
3.1.1 创建数据库 create databases hive
3.1.2 创建表 create table hive.student (id int,name string,age int,sex string,address string) row format delimited fields terminated by '\t';
3.1.3 加载数据到表中 load data local inpath '/opt/data/student.txt' overwrite into table hive.student;
3.1.4 查看表的描述信息 desc formatted hive.student;
3.1.5 查看表的详细信息 desc formatted hive.student;
3.1.6 查看hive中自带的函数 show functions;
hive的使用01的更多相关文章
- HIVE之 Sqoop 1.4.6 安装、hive与oracle表互导
1. sqoop数据迁移 1.1 概述 sqoop是apache旗下一款“Hadoop和关系数据库服务器之间传送数据”的工具. 导入数据:MySQL,Oracle导入数据到Hadoop的HDFS.HI ...
- Hive 这些基础知识,你忘记了吗?
Hive 其实是一个客户端,类似于navcat.plsql 这种,不同的是Hive 是读取 HDFS 上的数据,作为离线查询使用,离线就意味着速度很慢,有可能跑一个任务需要几个小时甚至更长时间都有可能 ...
- Sqoop 导入及导出表数据子集命令详解
Sqoop命令详解 1.import命令 案例1:将mysql表test中的数据导入hive的hivetest表,hive的hivetest表不存在. sqoop import --connect j ...
- Hive 01 概述、安装配置
概述 数据仓库:是一个面向主题的.集成的.不可更新的.随时间不变化的数据集合,它用于支持企业或组织的决策分析处理. 数据仓库的结构和建立过程: 数据源 数据存储及管理 ETL Extract 提取 T ...
- Hive编程指南_学习笔记01
第四章: HQl的数据定义 1:创建数据库 create database financials; create database if not exists financials; 2: ...
- hive学习01词频统计
词频统计 #创建表,只有一列,列名line create table word_count ( line string) row format delimited fields terminated ...
- hive
Hive Documentation https://cwiki.apache.org/confluence/display/Hive/Home 2016-12-22 14:52:41 ANTLR ...
- Hive 笔记
DESCRIBE EXTENDED mydb.employees DESCRIBE EXTENDED mydb.employees DESCRIBE EXTENDED mydb.employees ...
- Hive函数大全
一.关系运算: 1. 等值比较: = 语法:A=B 操作类型:所有基本类型 描述: 如果表达式A与表达式B相等,则为TRUE:否则为FALSE 举例: hive> select 1 from l ...
随机推荐
- input只能输入数字并限制长度
<style> /*在chrome下移除input[number]的上下箭头*/ input::-webkit-outer-spin-button,input::-webkit-inner ...
- nginx: [emerg] bind() to 0.0.0.0:80 failed (98: Address already in use) 错误解决
今天在做LNMP的时候,启动nginx服务,无法开启,导致网页打不开.把服务从起一下发现提示错误如下: Starting nginx: nginx: [emerg] bind() to 0.0.0.0 ...
- 主页面、iframe之间调用以及传值
主页面.iframe之间的调用和传值,无非就是两个交互形式: 主页面与子页面的交互 子页面之间的交互 接下来要讲的是四种交互传值的方式:利用postMessage方法传值.DOM操作传值.URL方式传 ...
- HTML Meta中添加X-UA-Compatible和IE=Edge,chrome=1有什么作用
HTML Meta中添加X-UA-Compatible和IE=Edge,chrome=1有什么作用? X-UA-Compatible是自从IE8新加的一个设置,对于IE8以下的浏览器是不识别的. 通过 ...
- JS Note1
1.JavaScript 简史 JavaScript 诞生于1995 年.当时,它的主要目的是处理以前由服务器端语言(如Perl)负责的一些输入验证操作 如今,JavaScript 的用途早已不再局限 ...
- CSS深入理解之margin
前言 改变容器尺寸 margin改变容器尺寸有以下两个限制条件: 使用于没有设置宽高的普通block元素float/absolute/fixed元素 以及 inlines水平 table- ...
- python中应用*args 与**kwargs
这是Python函数可变参数 args及kwargs------->目的是:当函数的参数不确定时,可以使用*args 和**kwargs,*args 没有key值,**kwargs有key值. ...
- XPath 实例
在本节,让我们通过实例来学习一些基础的 XPath 语法. XML实例文档 我们将在下面的例子中使用这个 XML 文档: "books.xml" : <?xml versio ...
- javaweb 学习资源
http://jinnianshilongnian.iteye.com/category/231099
- Shopex4.85商派2014年商业模板和商业插件共600多套仅售600元送分销王2代SEO排名神具。
这批shopex商业插 件+模板都是本人从官方模板网站收购.高价.交换.以及收藏得来.本人因现实工作太忙不得不转手出售这批源代码,限时低价出售给和我一样从事shopex 系统网店电子商务的兄弟姐妹们, ...