课程大纲 主题 时间 主题 列数据库 (第1天) 上午 HBase发展简史-Google BigTable的开源实现 HBase基础:安装部署.管理命令.运行监控和开发接口: HBase专题:服务组件.存储模式.逻辑架构 下午 HBase优化:配置调优.客户端架构调优 HBase应用:实时查询数据库与操作数据库 HBase案例:XX实时查询数据库系统 文档数据库 (第2天) 上午 MongoDB概述-最类似关系型数据库的No-SQL MongoDB物理存储-并非NoSQL,为何MongoDB仍然…
Spark处理后的结果数据resultDataFrame可以有多种存储介质,比较常见是存储为文件.关系型数据库,非关系行数据库. 各种方式有各自的特点,对于海量数据而言,如果想要达到实时查询的目的,使用HBase作为存储的介质是非常不错的选择. 现需求是:Spark对Hive.mysql数据源进行处理,然后将resultDataFrame写入HBase,但是HBase和Spark不在用一个环境,即结果需要通过网络IO进行二次操作.所以此篇文章会采取某些手段来实现上述要求. 将DataFrame写…
windows下安装MongoDB解压版 我安装的是(mongodb-win32-x86_64-2008plus-ssl-4.0.8.zip)版本 亲测可以使用. 连接: Windows下MongoDB的安装与配置(https://blog.csdn.net/heshushun/article/details/77776706)…
<Java核心技术 卷II 高级特性(原书第9版)> 基本信息 原书名:Core Java Volume II—Advanced Features(Ninth Edition) 作者: (美)Cay S. Horstmann    Gary Cornell 译者: 陈昊鹏 王浩 姚建平 丛书名: Java核心技术系列 出版社:机械工业出版社 ISBN:9787111442509 上架时间:2014-2-21 出版日期:2014 年2月 开本:16开 页码:1 版次:1-1 所属分类:计算机 &…
windows下安装mongoDB(zip版) 下面说明如何在win10下用zip包安装好mongoDB数据库 首先要先从网上下载mongoDB的zip包 http://dl.mongodb.org/dl/win32/x86_64 可以从这里下载,我选的是最新的3.2版本,可以下载mis的,但要自己安装,这个安装教程网上有,另外也可以下载zip版本的,这里我用的是zip版本的,大概100多兆. 我准备将该数据库放于d盘,所以我在d盘下建立了mongoDB文件夹,在其下又分别建立了mongoDB文…
1.重温<JavaScript高级程序设计>(第3版) (一)重温<javascript高级程序设计>(第1-4章) (二)重温<JavaScript高级程序设计>(第6章) (三)重温<JavaScript高级程序设计>(第5.7章)…
一.课程概述 本次培训课程主要面向大数据系统管理人员和开发设计人员,基于开源社区大数据应用最活跃的Hadoop和HBase技术框架.围绕分布式文件存储(HDFS).分布式并行计算(Map/Recue)和非关系型数据库(NoSql)三个大数据核心应用展开,旨在帮助培训对象建立起完整的大数据理论基础框架和实践操作能力.主要课程内容包括:1.大数据应用发展史:2.分布式文件系统HDFS原理与架构.HDFS系统管理.HDFS开发与设计:3.分布式并行计算框架Map/Reduce工作原理与架构.Map/R…
一.课程概述 本次培训课程主要面向大数据系统管理人员和开发设计人员,基于开源社区大数据应用最活跃的Hadoop和HBase技术框架,围绕分布式文件存储(HDFS).分布式并行计算(Map/Recue)和非关系型数据库(NoSql)三个大数据核心应用展开,旨在帮助培训对象建立起完整的大数据理论基础框架和实践操作能力.主要课程内容包括:1.大数据应用发展史:2.分布式文件系统HDFS原理与架构.HDFS系统管理.HDFS开发与设计:3.分布式并行计算框架Map/Reduce工作原理与架构.Map/R…
一.课程概述 本课程面向No-SQL开发人员.系统分析和系统架构师,目的在于帮助他们建立起完整的No-SQL数据库的概念,应用场景.相关开源技术框架和优缺点. 二.课程大纲 主题 时间 主题 No-SQL概述 (第1天) 上午 No-SQL的前世今生-业务才是王道: RDBMS与No-SQL数据库对比分析: 主流No-SQL数据库分类和应用场景: 下午 典型No-SQL数据库开源产品介绍: No-SQL数据库关键指标分析: 正本清源:我们真的需要No-SQL吗? 键值数据库 (第2天) 上午 开…
MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系数据库的.他支持的数据结构非常松散,是类似json的bjson格式,因此可以存储比较复杂的数据类型.Mongo最大的特点是他支持的查询语言非常强大,其语法有点类似于面向对象的查询语言,几乎可以实现类似关系数据库单表查询的绝大部分功能,而且还支持对数据建立索引. 它的特点是高性能.易部署.易使用,存储数据非常方便.主要功能特性有: 面向集合存储,易存储对象类型的数据. 模式自由. 支持动态查询. 支持…