准备工作:

1)安装了伪分布式hadoop:参照http://blog.csdn.net/zolalad/article/details/11472207

2)修改已安装好的hadoop配置文件:

  a)修改hdfs-site.xml

<property>
 <name>dfs.support.append</name>      <!-- 可追加-->
 <value>true</value>
</property>
 
<property>
 <name>dfs.datanode.max.xcievers</name>  <!--使得可处理的数据流变大 -->
 <value>4096</value>
</property>
</configuration>
  b)重启hadoop
  ./stop-all.sh
  ./start-all.sh 
  ./hadoop dfsadmin -report     --查看hadoop启动状态
 

 安装HBase

写在前面,需注意:在root用户下配置,所以在启动前需要进行下面操作,确保将hbase相关文件付给了hadoop用户

cd /opt/hbase

ls -alh    --查看各文件的用户

chown -R hadoop:hadoop hbase/  --如果有的文件用户是root,则需将该文件赋给hadoop用户

如果在后面启动步骤报错,权限不够,请确认/opt/hbase/logs文件是属于hadoop用户

解压与安装

1)将文件hbase-0.94.2.tar.gz解压到/opt
tar -zxvf hbase-0.94.2.tar.gz -C /opt    -- -C参数,可指定解压到的目录
将文件名hbase-0.94.2修改为hbase
mv hbase-0.94.2.tar.gz hbase
2)将hbase的用户赋给hadoop
chown -R hadoop:hadoop hbase/
 
配置
1)配置hbase/conf/hbase-env.sh

export HBASE_MANAGES_ZK=true
export JAVA_HOME=/usr/program/jdk1.6.0_13

2)配置hbase/conf/hbase-site.xml

<configuration>

<property>
  <name>hbase.rootdir</name>

<!-- 下面路径一定要跟hadoop中core-site.xml中fs.default.name中的路径相同,否则会出错。-->
  <value>hdfs://localhost:9000/hbase</value>
</property>
<property>
  <name>hbase.cluster.distributed</name>
  <value>true</value> <!--表明是否是完全分布式hbase集群 -->
</property>
<property>
  <name>hbase.localhost</name>
  <value>hdfs://localhost:60000</value>
</property>

<property>
  <name>hbase.tmp.dir</name>
  <value>/home/${user.name}/tmp</value>
</property>
<property>
  <name>hbase.zookeeper.quorum</name>
  <value>localhost</value> <!--主机名是localhost,可通过hostname查看-->

</property>
<property>
  <name>hbase.zookeeper.property.dataDir</name>
  <value>/home/${user.name}/zookeeper</value>
</property>

<property>
<name>dfs.replication</name>
<value>true</value>
<description>The replication countfor HLog HFile storage. Should not be greater than HDFS datanode count.
</description>
</property>

</configuration>
3)配置hbase/conf/regionservers
localhost    --修改为主机名
4)覆盖hadoop类库

/home/hadoop/hadoop-env/hadoop-1.0.1/目录下的hadoop-core-1.0.1.jar替换/opt/hbase/lib下的该类
 
开启HBase
启动顺序:先启动Hadoop——>再启动Hbase,关闭顺序:先关闭Hbase——>再关闭Hadoop。
 
验证安装:
1.首先启动hadoop集群:jps查看namenode和datanode的服务是否正常启动
2.启动hbase:同样通过jps查看,注意在master(即HMater)节点上有HMaster和HRegionServer、HQuorumPeer三个服务项(后两者是因为将namenode也作为了一个HRegionServers),在datanode(即HRegionServer)中查看需要启动的是HQuorumPeer和HRegionServer
3.整个集群正常启动后,
1)通过hbase 的命令行管理界面看看是否正常 
cd /opt/hbase/bin
./hbase shell --进入命令行管理模式,然后可以通过list可以列举你当前数据库的名称,如果失败会有java错误抛出,
2)通过web访问hbase
http://localhost:60010/master.jsp (http://master:60010/master-status)通过WEB页面来管理查看HBase数据库
http://localhost:60030/regionserver.jsp 查看regionserver信息
http://localhost:60010/zk.jsp查看zookeeper信息
 
 
效果图:
说明:上面启动中的hbase-daemon.sh没有权限,对hbase启动没有影响
 
使Hadoop支持HBase MapReduce
在HBase中,对Hadoop MapReduce进行了一些封装使Hadoop MapReduce可以直接以HBase表作为输入和输出。因此,要配置Hadoop引入HBase的类库。在Hadoop的conf/hadoop-env.sh里面添加:(注意HADOOP_CLASS路径里不要有换行符,否则会报错

export HBASE_HOME=/opt/hbase
export HADOOP_CLASSPATH=$HASOOP_CLASSPATH:$HBASE_HOME/hbase-0.94.2.jar:$HBASE_HOME/hbase-0.94.2-tests.jar:$HBASE_HOME/conf:$HBASE_HOME/lib/zookeeper-3.4.3.jar:$HBASE_HOME/lib/protobuf-java-2.4.0a.jar

关闭后重启hadoop。

HBase的伪分布式安装(原创)的更多相关文章

  1. Hadoop生态圈-hbase介绍-伪分布式安装

    Hadoop生态圈-hbase介绍-伪分布式安装 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 一.HBase简介 HBase是一个分布式的,持久的,强一致性的存储系统,具有近似最 ...

  2. Hbase的伪分布式安装

    Hbase安装模式介绍 单机模式 1> Hbase不使用HDFS,仅使用本地文件系统 2> ZooKeeper与Hbase运行在同一个JVM中 分布式模式– 伪分布式模式1> 所有进 ...

  3. Hadoop + Hive + HBase + Kylin伪分布式安装

    问题导读 1. Centos7如何安装配置? 2. linux网络配置如何进行? 3. linux环境下java 如何安装? 4. linux环境下SSH免密码登录如何配置? 5. linux环境下H ...

  4. HBase基础和伪分布式安装配置

    一.HBase(NoSQL)的数据模型 1.1 表(table),是存储管理数据的. 1.2 行键(row key),类似于MySQL中的主键,行键是HBase表天然自带的,创建表时不需要指定 1.3 ...

  5. hbase伪分布式安装(单节点安装)

    hbase伪分布式安装(单节点安装) http://hbase.apache.org/book.html#quickstart   1.    前提配置好java,环境java变量     上传jdk ...

  6. Hbase伪分布式安装

    前面的文章已经讲过hadoop伪分布式安装,这里直接介绍hbase伪分布式安装. 1. 下载hbase 版本hbase 1.2.6 2. 解压hbase 3. 修改hbase-env.sh 新增如下内 ...

  7. 第二章 伪分布式安装hadoop hbase

    安装单机模式的hadoop无须配置,在这种方式下,hadoop被认为是一个单独的java进程,这种方式经常用来调试.所以我们讲下伪分布式安装hadoop. 我们继续上一章继续讲解,安装完先试试SSH装 ...

  8. HBase伪分布式安装(HDFS)+ZooKeeper安装+HBase数据操作+HBase架构体系

    HBase1.2.2伪分布式安装(HDFS)+ZooKeeper-3.4.8安装配置+HBase表和数据操作+HBase的架构体系+单例安装,记录了在Ubuntu下对HBase1.2.2的实践操作,H ...

  9. 一.Kylin的伪分布式安装

    一.伪分布式安装kylin 2018年4月15日 15:06 安装需要的环境 1. hadoop集群环境:由于安装的是CDH5.14.0的版本,所以相关组件都是跟5.14.0相关 2. spark采用 ...

随机推荐

  1. qsort函数、sort函数【转】

    http://blog.163.com/yuhua_kui/blog/static/9679964420142195442766/ 先说明一下:qsort和sort,只能对连续内存的数据进行排序,像链 ...

  2. 【python】调用机器喇叭发出蜂鸣声(Beep)

    ##coding:utf-8 import winsound winsound.Beep(600,6000) #其中600表示声音大小,1000表示发生时长,1000为1秒

  3. vc++>>Connection using old (pre-4.1.1) authentication protocol refused (client option 'secure_auth' enable

    用VC来连接远程MYSQL时,出现如标题一样的错误,网上搜索了此错误产生的原因,最后自己找到了解决办法. 此错误产生的原因: 异常原因在于服务器端的密码管理协议陈旧,使用的是旧有的用户密码格式存储:但 ...

  4. 个人JS零碎知识整理

    1."DOM2级事件"规范要求的事件流包括三个阶段:事件捕获阶段.处于目标阶段.事件冒泡阶段 2.isNaN()       数字.空串.空格 返回false 变量是数字时返回fa ...

  5. flddler使用方法

    http://blog.csdn.net/geekgjie/article/details/8029936

  6. linux 学习干货

    学习了第七章. 每一个键盘对应一个信号.主要的有: ^代表 Ctrl <Backspance> erase ,删除一个字符. ^W werase,删除一个单词 ^U / ^X kill , ...

  7. JQuery easyui Datagrid 分页事件

    easyui是Jquery中的一个轻量级UI插件,提供了一些诸如window.datagrid.button等控件.现在主要说说Datagrid中分页控件的使用. easyui中可以单独添加分页pag ...

  8. [转]Dynamic SQL & Stored Procedure Usage in T-SQL

    转自:http://www.sqlusa.com/bestpractices/training/scripts/dynamicsql/ Dynamic SQL & Stored Procedu ...

  9. super语句

    1.super是对当前对象的父类对象的默认引用, 2.super必须出现在子类中(方法或构造函数),而不是其他位置 3.super无法访问private成员属性和方法

  10. bootstrap2.0与3.0的区别

    在阅读这篇bootstrap2.0与3.0的区别的文章之前,大家一定要先了解什么是响应式网站设计?推荐大家看看这篇"教你快速了解响应式网站设计" . 我觉得bootstrap的可视 ...