1.首先关闭机器上之前配置的分布式Hadoop

  命令: (在hadoop的安装目录中)  sbin/stop-dfs.sh

               

  关闭: yarn   命令:  sbin/stop-yarn.sh

2.先使用hadoop-senior.zuoyan.com 上的 伪分布式Hadoop进行配置 Hive (将需要的文件上传到服务器上)

2.1 启动 hdfs

     

2.2 启动yarn

          

2.3 将secondaryNamenode 停止掉  节省点内存  命令:sbin/hadoop-daemon.sh stop secondarynamenode

     

   2.4 启动historyserver

      命令: sbin/mr-jobhistory-daemon.sh start historyserver

     

3.将Hive的安装包进行解压

        tar -zxvf apache-hive-0.13.1-bin.tar.gz -C /opt/modules/

  更改一下名称:

        mv apache-hive-0.13.1-bin/ hive-0.13.1

  

4.进入Hive解压目录中进行配置文件

    4.1  更改文件名称  将 hive-env.sh.template 更改为hive.env.sh

                   

4.2 设置Hadoop_Home   和Hive的conf

        

          这个具体的目录 根据自己的实际情况来改

4.3查看dfs文件系统上的文件目录 创建  tmp 文件目录 和 /user/hive/warehouse(如果没有这个目录,默认创建的就是这个目录,用来存放Hive中的表)

                  

       创建dfs上的目录  命令  :

                   mkdir: Cannot create directory /user/hive/warehouse. Name node is in safe mode.

        结果出现了意外 !!! Σ( ° △ °|||)︴

                 

          可以很明白的看见 在安全模式下

        执行命令   :bin/hadoop dfsadmin -safemode leave   就可以解决这个问题,然后在创建文件目录

        

           创建好文件目录后,就需要对这两个文件目录赋予权限

        命令   

        bin/hdfs dfs -chmod g+x /tmp
        bin/hdfs dfs -chmod g+x /user/hive/warehouse

        查看一下权限  bin/hdfs dfs -ls -R /

         

         

5.打开Hive

    使用命令: bin/hive

                      

   可以使用count(*) 命令来统计 ,可以查看出使用的就是yarn

                       

    

  

      

    

    

    

     

Hive安装部署及简单测试 网页《一》的更多相关文章

  1. Hive安装部署与配置

    Hive安装部署与配置 1.1 Hive安装地址 1)Hive官网地址: http://hive.apache.org/ 2)文档查看地址: https://cwiki.apache.org/conf ...

  2. saltstack安装部署以及简单实用

    一,saltstack简介:     SaltStack是一种新的基础设施管理方法开发软件,简单易部署,可伸缩的足以管理成千上万的服务器,和足够快的速度控制,与他们交流,以毫秒为单位. SaltSta ...

  3. dubbo-admin管理控制台的安装部署(最简单)

    Dubbo-admin最简单的安装部署,十分钟就能搞定! 网上找的安装教程虽说详细,但是就是因为详细操作起来而显得繁琐.今天,我帮大家跳过这些繁琐的步骤,简单快捷的安装部署dubbo-admin. 1 ...

  4. Linux实现树莓派3B的国密SM9算法交叉编译——(一)环境部署、简单测试与eclipse工程项目测试

    这篇文章主要介绍了交叉编译的实现,包括环境部署,并简单测试交叉编译环境是否安装成功. 一.交叉编译 在一个平台上生成另一个平台上的可执行代码.为什么要大费周折的进行交叉编译呢?一句话:不得已而为之.有 ...

  5. Flume NG安装部署及数据采集测试

    转载请注明出处:http://www.cnblogs.com/xiaodf/ Flume作为日志收集工具,监控一个文件目录或者一个文件,当有新数据加入时,采集新数据发送给消息队列等. 1 安装部署Fl ...

  6. 02_ Flume的安装部署及其简单使用

    一.Flume的安装部署: Flume的安装非常简单,只需要解压即可,当然,前提是已有hadoop环境 安装包的下载地址为:http://www-us.apache.org/dist/flume/1. ...

  7. elasticsearch kibana的安装部署与简单使用(一)

    1.先说说es 我早两年使用过es5.x的版本,记得当时部署还是很麻烦,因为es是java写的,要先在机器上部署java环境jvm之类的一堆东西,然后才能安装es 但是现在我使用的是目前最新的7.6版 ...

  8. Hive —— 安装部署

    一.安装Hive 1.1 下载并解压 下载所需版本的Hive,这里我下载版本为cdh5.15.2.下载地址:http://archive.cloudera.com/cdh5/cdh/5/ # 下载后进 ...

  9. Hive安装部署

    目录 一.        安装Hive. 1 1.       选择CDH版本的... 1 2.       解压文件... 1 二.        配置Hive. 1 1.       配置环境变量 ...

随机推荐

  1. python_super注意事项

    class room: def __init__(self,area=120,usedfor='sleep'): self.area = area self.usedfor = usedfor def ...

  2. Spring boot FastJson

    介绍:FastJson 是ailibaba 的一款解析Json的开源框架 使用方式1 引入jar 包 <dependency>    <groupId>com.alibaba& ...

  3. 大数据和hadoop的一些基础知识

    一.前言 大数据这个概念不用我提大家也听过很多了,前几年各种公开论坛.会议等场合言必及大数据,说出来显得很时髦似的.有意思的是最近拥有这个待遇的名词是“人工智能/AI”,当然这是后话. 众所周知,大数 ...

  4. Linux服务器---邮件服务器dovecot

    安装dovecot Dovecot是CentOS系统中著名的POP3/IMAP服务器实现.POP3/IMAP是从邮件服务器中读取邮件时使用的协议,POP3将邮件全部从服务器中拖取下来:IMAP则每次从 ...

  5. 转:wcf大文件传输解决之道(2)

    此篇文章主要是基于http协议应用于大文件传输中的应用,现在我们先解析下wcf中编码器的定义,编码器实现了类的编码,并负责将Message内存中消息转变为网络发送的字节流或者字节缓冲区(对于发送方而言 ...

  6. 单台主机上DB2 10.5和arcgis 10.4 空间数据库配置

    该篇文章重点参考arcgis官网说明:http://enterprise.arcgis.com/zh-cn/server/10.4/publish-services/linux/register-db ...

  7. node.js核心技术

    一.知识结构: http模块:配置简单 的web服务,npm/cnpm工具 express框架:express中间件进行服务配置:路由:请求处理: DB服务:学习使用mysql关系型数据库: web接 ...

  8. Linux 执行程序 报错误:Permission denied.

    是对此文件所在位置没有权限导致的 chmod +x /home/yourfile 即可

  9. plsql登录报错身份证明检索失败

    找到sqlnet.ora文件  在Oracle安装目录下    \product\12.2.0\dbhome_1\network\admin 把     SQLNET.AUTHENTICATION_S ...

  10. HashMap和LinkedHashMap区别

    import java.util.HashMap; import java.util.Iterator; import java.util.LinkedHashMap; import java.uti ...