下载Sqoop ，直接解压缩;然后导入2个环境变量

1、导入oracle数据库中表emp的数据到hive表中

1、导入到HDFS中

$ sqoop import --connect jdbc:mysql://database.example.com/employees \

    --username aaron --password 12345
--connect用来链接数据库，--table选择一个表，--colums选择列，-m选择mapreduce任务数量，--target-dir选择导入到HDFS的路径
2、导入Hive数据仓库中

3、制定表的名字，导入到hive中指定的表中

4、制定条件

--hive-table导入到hive'中制定的emp2表中，若不存在，则创建，--where指明条件

5、查询语句 query

6、导出数据

												


											
hive数据导入Sqoop工具的更多相关文章
	

    
								
  1. sqoop用法之mysql与hive数据导入导出
		
    目录 一. Sqoop介绍 二. Mysql 数据导入到 Hive 三. Hive数据导入到Mysql 四. mysql数据增量导入hive 1. 基于递增列Append导入 1). 创建hive表  ...
    
		
    2. 
						
  2. 利用sqoop将hive数据导入导出数据到mysql
		
    一.导入导出数据库常用命令语句 1)列出mysql数据库中的所有数据库命令  #  sqoop list-databases --connect jdbc:mysql://localhost:3306 ...
    
		
    3. 
						
  3. Nebula Exchange 工具 Hive 数据导入的踩坑之旅
		
    摘要:本文由社区用户 xrfinbj 贡献,主要介绍 Exchange 工具从 Hive 数仓导入数据到 Nebula Graph 的流程及相关的注意事项. 1 背景 公司内部有使用图数据库的场景,内 ...
    
		
    4. 
						
  4. HData——ETL 数据导入/导出工具
		
    HData是一个异构的ETL数据导入/导出工具,致力于使用一个工具解决不同数据源(JDBC.Hive.HDFS.HBase.MongoDB.FTP.Http.CSV.Excel.Kafka等)之间数据 ...
    
		
    5. 
						
  5. Hive数据导入导出的几种方式
		
    一,Hive数据导入的几种方式 首先列出讲述下面几种导入方式的数据和hive表. 导入: 本地文件导入到Hive表: Hive表导入到Hive表; HDFS文件导入到Hive表; 创建表的过程中从其他 ...
    
		
    6. 
						
  6. pt-archiver（数据导入导出工具）
		
    数据导入导出工具pt-archiver 工具可以将MySQL的表数据导出到一个新表或者一个文件,也有自己的应用场景,比如数据归档,删除数据,数据合并等. 具体用法: pt-archiver [OPTI ...
    
		
    7. 
						
  7. MySQL多线程数据导入导出工具Mydumper
		
    http://afei2.sinaapp.com/?p=456 今天在线上使用mysqldump将数据表从一个库导入到另外一个库,结果速度特别慢,印象中有个多线程的数据导入导出工具Mydumper,于 ...
    
		
    8. 
						
  8. KUDU数据导入尝试一：TextFile数据导入Hive,Hive数据导入KUDU
		
    背景 SQLSERVER数据库中单表数据几十亿,分区方案也已经无法查询出结果.故:采用导出功能,导出数据到Text文本(文本>40G)中. 因上原因,所以本次的实验样本为:[数据量:61w条,文 ...
    
		
    9. 
						
  9. 如何利用sqoop将hive数据导入导出数据到mysql
		
    运行环境  centos 5.6   hadoop  hive sqoop是让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出的一个工具. 上海尚学堂 ...
    
		
    10. 
		

	


随机推荐
	

    
									
  1. mysql对String类型的数字值排序
			
    一.需求:根据月份分组,然后再根据月份排序 效果图 sql如下: SELECT ) number, date_format(created_at,'%c') date FROM ********* W ...
    
			
    2. 
						
  2. Cookie、sessionStorage与localStorage的区别
			
    (1) sessionStorage 保存数据的方法: SessionStor.setItem(“key”,”value”) 或者写成 sessionStorage.key=”value” 读取数据的 ...
    
			
    3. 
						
  3. 网易云音乐 歌词制作软件 BesLyric （最新版本下载）
			
    导读 BesLyric , 一款专门制作 网易云音乐 LRC 滚动歌词的软件! 搜索.下载.制作 歌词更方便! 哈哈,喜欢网易云音乐,又愁于制作歌词的童鞋有福啦!Beslyric 为你排忧解难! 本文 ...
    
			
    4. 
						
  4. Zephyr学习专题
			
    1 前言 本来想学习Zyphyr的Power Management,但是看着看着就被带进去了. 你看功耗,里面的suspend涉及到时间补偿相关的吧,然后就涉及到了Kernel Clocks/Time ...
    
			
    5. 
						
  5. 17-(基础入门篇)GPRS(Air202)串口
			
    https://www.cnblogs.com/yangfengwu/p/9968716.html 现在看一下官方给的demo 其实只要有两个就好说了 module(...,package.seeal ...
    
			
    6. 
						
  6. 开发工具｜给你的项目买份保险：Python虚拟环境
			
    读完需要 9 分钟 1. 什么是虚拟环境? 虚拟环境的意义,就如同 虚拟机 一样,它可以实现不同环境中Python依赖包相互独立,互不干扰.这在一定程度的意义上,给了我们的项目一份很有力的保障.在这里 ...
    
			
    7. 
						
  7. mysql分表操作
			
    一般分表操作有垂直拆分和水平拆分.顾名思义. 1.  垂直拆分是指,这个表的列,即字段,要拆分成两个或多个表. 这个应用场景比如:这个表字段,几个都是int.datetime等,有那么一个是text类 ...
    
			
    8. 
						
  8. java算法----排序----（2）选择排序
			
    package log; public class Test4 { /** * java算法---选择排序 * * @param args */ public static void main(Str ...
    
			
    9. 
						
  9. RabbmitMQ-工作队列及相关概念
			
    工作队列-WorkQueue 实现功能: 将耗时的任务分发给多个工作者 设计思想: 避免直接去做一件资源密集型的任务,并且还得等它完成.因此将任务安排后再去做.将任务封装为一个消息,发到队列中.一个工 ...
    
			
    10. 
						
  10. 数列分块入门九题（二）：LOJ6280~6282
			
    Preface 个人感觉这中间的三题是最水的没有之一 数列分块入门 4--区间加法,区间求和 这个也是很多数据结构完爆的题目线段树入门题,但是练分块我们就要写吗 修改还是与之前类似,只不过我们要维护每 ...
    
			
    11.