Hbase 建表基本命令总结

【Hbase 建表基本命令总结】的更多相关文章

Hbase 建表基本命令总结

访问hbase,以及操作hbase,命令不用使用分号 hbase shell 进入hbase list 查看表 hbase shell -d hbase(main):024:0> scan '.META.' =============小例子=================================================== 1. 创建一个表member hbase(main):025:0> create 'member','m_id','address','info' 2.l…

Hbase（二）hbase建表

一.建表高级属性下面几个 shell 命令在 hbase 操作中可以起到很到的作用,且主要体现在建表的过程中,看下面几个 create 属性 1.bloomfilter 布隆过滤器默认是 NONE 是否使用布隆过虑及使用何种方式, 布隆过滤可以每列族单独启用使用 HColumnDescriptor.setBloomFilterType(NONE | ROW | ROWCOL) 对列族单独启用布隆 Default = ROW 对行进行布隆过滤(默认是ROW过滤) …

Hbase建表时遇到的问题This could be a sign that the server has too many connections

Hbase创建表时遇到以下错误: ERROR: org.apache.hadoop.hbase.ZooKeeperConnectionException: HBase is able to connect to ZooKeeper but the connection closes immediately. This could be a sign that the server has too many connections (30 is the default). Consider ins…

HBase 建表新增数据记录

login as: root root@192.168.12.23's password: ********* Last login: Wed Aug 20 00:41:17 2014 from 192.168.12.67 [root@testHostName1 ~]# create 'testTable','testColumn' -bash: create: command not found [root@testHostName1 ~]# hbase shell HBase Shell;…

hbase建表

import java.util.ArrayList; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.HBaseConfiguration; import org.apache.hadoop.hbase.HColumnDescriptor; import org.apache.hadoop.hbase.HTableDescriptor; import org.apache.hadoop.hb…

hbase建表时 ERROR: java.io.IOException: Table Namespace Manager not ready yet, try again later

其实解决不难,是因为时钟不同步,把每个节点切换到root用户下同步时钟就好了,在重启hbase!…

hbase操作（shell 命令，如建表，清空表，增删改查）以及 hbase表存储结构和原理

两篇讲的不错文章 http://www.cnblogs.com/nexiyi/p/hbase_shell.html http://blog.csdn.net/u010967382/article/details/37878701?utm_source=tuicool&utm_medium=referral hbase操做 hbase web操作 hbase shell 基本操作 1建表具体命令 2建表后查看表describe 3清空表truncate lmj_test 4删除表 5修改表结构先…

【hbase】——Java操作Hbase进行建表、删表以及对数据进行增删改查，条件查询

1.搭建环境新建JAVA项目,添加的包有: 有关Hadoop的hadoop-core-0.20.204.0.jar 有关Hbase的hbase-0.90.4.jar.hbase-0.90.4-tests.jar以及Hbase资源包中lib目录下的所有jar包 2.主要程序 package com.wujintao.hbase.test; import java.io.IOException; import java.util.ArrayList; import java.util.List;…

(转)Java操作Hbase进行建表、删表以及对数据进行增删改查，条件查询

1.搭建环境新建JAVA项目,添加的包有: 有关Hadoop的hadoop-core-0.20.204.0.jar 有关Hbase的hbase-0.90.4.jar.hbase-0.90.4-tests.jar以及Hbase资源包中lib目录下的所有jar包 2.主要程序 package com.wujintao.hbase.test; import java.io.IOException; import java.util.ArrayList; import java.util.List;…

Java操作Hbase进行建表、删表以及对数据进行增删改查，条件查询

1.搭建环境新建JAVA项目,添加的包有: 有关Hadoop的hadoop-core-0.20.204.0.jar 有关Hbase的hbase-0.90.4.jar.hbase-0.90.4-tests.jar以及Hbase资源包中lib目录下的所有jar包 2.主要程序 package com.wujintao.hbase.test; import java.io.IOException; import java.util.ArrayList; import java.util.List;…

HBase之四--(1)：Java操作Hbase进行建表、删表以及对数据进行增删改查，条件查询

1.搭建环境新建JAVA项目,添加的包有: 有关Hadoop的hadoop-core-0.20.204.0.jar 有关Hbase的hbase-0.90.4.jar.hbase-0.90.4-tests.jar以及Hbase资源包中lib目录下的所有jar包 2.主要程序 package com.sf.study.hbase; import java.io.IOException; import java.util.ArrayList; import java.util.List; impor…

HBase调优案例（一）——建表长时间等待最后失败

现象: 1.在HBase Shell里执行建表操作会等很久,最终失败: 2.通过代码侧进行建表同样不能成功. 原因排查: 1.查询HMaster日志,发现有接收到建表(create)的RPC请求: 在zookeeper的/hbase/table和/hbase/table-lock路径下也都能看到此table; /hbase/table-lock/testXXXX路径下存在write**文件,表明获取table锁的过程没有问题: 2.从代码侧观察,发现建表操作的CreateTableHan…

hbase基础建表语句

在Hadoop目录下的HBASE下执行命令 ./hbase shell 进入hbase环境创建hbase 数据库表 create "表名", "字段A","字段B".... 删除表首先desable "表名" 然后drop "表名" 查看表机构 desc "表名" 查看所有表名 list 查看表数据 scan "表名" -----------------…

HBase 的表结构

HBase 的表结构 2016-10-13 杜亦舒 HBase 是一个NoSQL数据库,用于处理海量数据,可以支持10亿行百万列的大表,下面就了解一下数据是如何存放在HBase表中的关系型数据库的表结构为了更好的理解HBase表的思路,先回顾一下关系数据库中表的处理方式例如有一个用户表user_info,有字段:id.name.tel,表名和字段需要在建表时指定 create table user_info ( id 类型, name 类型, tel 类型 ) 然后插入两条数据 inser…

HBase之表空间

1.介绍在HBase中,namespace命名空间指对一组表的逻辑分组,类似RDBMS中的database,方便对表在业务上划分.Apache HBase从0.98.0, 0.95.2两个版本开始支持namespace级别的授权操作,HBase全局管理员可以创建.修改和回收namespace的授权. 2.namespace HBase系统默认定义了两个缺省的namespace hbase:系统内建表,包括namespace和meta表 default:用户建表时未指定namespace的表都创…

HBase(八): 表结构设计优化

在 HBase(六): HBase体系结构剖析(上) 介绍过,Hbase创建表时,只需指定表名和至少一个列族,基于HBase表结构的设计优化主要是基于列族级别的属性配置,如下图: 目录: BLOOMFILTER BLOCKSIZE IN_MEMORY COMPRESSION/ENCODING VERSIONS TTL BLOOMFILTER: Bloom Filter是由Bloom在1970年提出的一种多哈希函数映射的快速查找算法.通常应用在一些需要快速判断某个元素是否属于集合,但是并不严格要求…

hadoop系列第二坑： hive hbase关联表问题

关键词: hive创建表卡住了创建hive和hbase关联表卡住了其实针对这一问题在info级别的日志下是看出哪里有问题的(为什么只能在debug下才能看见呢,不太理解开发者的想法). 以调试模式进入hive客户端: hive --hiveconf hive.root.logger=DEBUG,console 执行创建关联表的语句 create table IF NOT EXISTS event_content_temp (id string,pack string,activity str…

HBase-建表(普通建表及预分区建表)

package com.hbase.HBaseAdmin; import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.HBaseConfiguration; import org.apache.hadoop.hbase.HColumnDescriptor; import org.apache.hadoop.hbase.HTableDescripto…

【HBase】表的version

建表.添加数据 Examples: hbase> create 'ns1:t1', 'f1', SPLITS => ['10', '20', '30', '40'] hbase> create 't1', 'f1', SPLITS => ['10', '20', '30', '40'] hbase> create 't1', 'f1', SPLITS_FILE => 'splits.txt', OWNER => 'johndoe' hbase> create…

Vertica 安装，建库，新建测试用户并授予权限，建表，入库

测试环境:RHEL 6.4 + Vertica 6.1.3-7 需求:搭建Vertica数据库3节点的测试环境,建立测试用户,建表,测试数据入库. 1.各节点关闭防火墙和SELinux,配置主机名,IP地址,统一root密码,确认系统字符集为utf-8 关闭防火墙和selinux: service iptables status;getenforce;service iptables stop;setenforce 0;service iptables status;getenforce 关闭防…

MapReduce和Spark写入Hbase多表总结

作者:Syn良子出处:http://www.cnblogs.com/cssdongl 转载请注明出处大家都知道用mapreduce或者spark写入已知的hbase中的表时,直接在mapreduce或者spark的driver class中声明如下代码 job.getConfiguration().set(TableOutputFormat.OUTPUT_TABLE, tablename); 随后mapreduce在mapper或者reducer中直接context写入即可,而spark则是…

建表过程-列名&列类型&修改表B

怎么建表? 主键名称重量价格生产日期保质期产地种类分析:我们只要把第一行的表头建好后,这张表也就完成了. 术语:建表的过程就是声明字段过程.声明数据类型. 考虑:名称数据的宽度?价格,重量....宽度. 浮点类型: decimal(5,2) 5是精度,2是标度.精度表示保存值的主要位数,标度表示小数点后面可以保存的位数. 建表取名原则: 1. 表名.列名不能有空格和中文. 2. 不能以数字开头 3…

Oracle获取干净的建表DDL语句，不含其它存储、表空间、段属性

早上一个同事资讯怎么获取到建表语句而且是不带存储那种SQL.Oracle自己提供了一个函数DBMS_METADATA.GET_DDL,但是获取到的建表语句含有存储.表空间.以及一些其他段的属性.如图: 看到这个获取到的ddl语句,想通过利用Oracle函数来截取的方式获取建表语句. 思路为:1.通过get_ddl获取建表语句 abc2.将abc中的pctfree'替换成';'3.计算';'的位置4.用substr来截取abc,从开头到';'的长度 SQL如下: SELECT SUBSTR(REP…

sql2000分享批量建表dev_编号

批量建表dev_3970000000014到dev_3970000000035 declare @i bigint declare @j int ) ) ) ) set @sql = '' set @sqlsource_delete = 'drop table [dbo].[dev_{SN}]' set @sqlsource_create = 'CREATE TABLE [dbo].[dev_{SN}] ( [TasTimeStamp] [bigint] PRIMARY KEY , [DevTi…

基于表的数据字典构造MySQL建表语句

表的数据字典格式如下: 如果手动写MySQL建表语句,确认麻烦,还不能保证书写一定正确. 写了个Perl脚本,可快速构造MySQL脚本语句. 脚本如下: #!/usr/bin/perl use strict; my $line; while(<>){ s/\r\n//; if(/(\S+)\s+(\S+)\s+(\S+)\s+(\S+)\s+(\S+)/){ ....'\','; }elsif(/(\S+)\s+(\S+)\s+(\S+)\s+(\S+)\s+/){ ...'\','; } p…

hive建表与数据的导入导出

建表: create EXTERNAL table tabtext(IMSI string,MDN string,MEID string,NAI string,DestinationIP string,DestinationPort string,SourceIP string,SourcePort string,PDSNIP string,PCFIP string,HAIP string,UserZoneID string,BSID string,Subnet string,ServiceOp…

在Oracle SQLplus下建用户建表

在建表之前最好新建一个用户,因为在sys用户下的表格不允许删除列, 所以最好不要在sys用户下建表. 一.在Oracle SQLplus下建用户: 1.以dba身份登陆SQLplus: [oracle@localhost etc]$ sqlplus /nolog SQL*Plus: Release 11.2.0.4.0 Production on Tue Jun 28 16:19:47 2016 Copyright (c) 1982, 2013, Oracle. All rights reser…