Bitmaps
核心知识点:
1.Bitmaps是一种特殊的“数据结构”,实质上是一个字符串,操作单元是位。
2.命令:
a.setbit:设置值,只能存储0和1,适用二元判断类型
b.getbit:获取值
c.bitcount:统计1的数量,可指定范围
d.bitop:可取交集、并集、非、异或
e.bitpos:第一个获取某种状态的偏移量
3.Bitmaps并不是任何场合都适合,在某些场合适用会有意想不到的效果。
1.数据结构模型
现代计算机用二进制(位)作为信息的基础单位,1个字节等位8位,例如“big”字符串是由3个字节组成,
但实际在计算机存储时将其用二进制表示,“big”分别对应的ASCII码分别是98、105、103,
对应的二进制分别是01100010、01101001和01100111,如下图:
许多开发语言都提供了操作位功能,合理地使用位能够有效地提高内存使用率和开发效率。
Redis提供了Bitmaps这个“数据结构”,可以实现对位的操作。把数据结构加上引号主要因为:
(1)Bitmaps本身不是一种数据结构,实际上它就是字符串,,但它可以对字符串的位进行操作;
(2)Bitmaps单独提供了一套命令,所以在Redis中使用Bitmaps和使用字符串的方法不太一样。
可以把Bitmaps想象成一个以位为单位的数组,数组的每个单元只能存储0和1,数组的下标在Bitmaps中叫做偏移量。
2.命令
本节将每个独立用户是否访问过网站存放在Bitmaps中,将访问的用户记做1,没有访问的用户记做0,用偏移量作为用户的id。
(1)设置值
setbit key offset value
设置键的第offset个位的值(从0算起),假设现在有20个用户,userid=0,5,11,15,19的用户对网站进行了访问,
那么当前Bitmaps初始化结果如图:
具体操作过程如下,unique:users:2016-04-05代表2016-04-05这天的独立访问用户的Bitmaps:
127.0.0.1:> setbit unique:users:--
(integer)
127.0.0.1:> setbit unique:users:--
(integer)
127.0.0.1:> setbit unique:users:--
(integer)
127.0.0.1:> setbit unique:users:--
(integer)
127.0.0.1:> setbit unique:users:--
(integer)
很多应用的用户id以一个指定的数字(例如10000)开头,直接将用户id和Birmaps的偏移量对应势必会造成一定的浪费,
通常的做法是每次做setbit操作时将用户id减去这个指定数字。
在第一次初始化Bitmaps时,如果偏移量非常大,那么整个初始化过程执行会比较慢,可能会造成Redis阻塞。
(2)获取值
getbit key offset
获取键的第offset位的值(从0开始计算),如果返回0代表没有访问,返回1代表访问过。
127.0.0.1:> getbit unique:users:--
(integer)
127.0.0.1:> getbit unique:users:--
(integer)
127.0.0.1:> getbit unique:users:--
(integer)
#不存在1000,自然返回0
(3)获取Bitmaps指定范围值为1的个数
bitcount key [start] [end]
127.0.0.1:> bitcount unique:users:--
(integer)
127.0.0.1:> bitcount unique:users:--
(integer)
127.0.0.1:> bitcount unique:users:--
(integer)
#start和and代表字节数,一个字节8位,1到3个字节就是索引在8到23之间
(4)Bitmaps间的运算
bitop op destkey key [key ...]
bitop是一个复合操作,它可以做多个Bitmaps的and(交集)、or(并集)、not(非)、xor(异或)操作,并将结果保存在destkey中。
下面有该网站连续2天客户访问的Bitmaps记录:
下面操作计算两天都访问网站的用户数:
127.0.0.1:> bitop and unique:users:and:--03_04 unique:users:-- unique:users:--
(integer)
127.0.0.1:> bitcount unique:users:and:--03_04
(integer)
下面操作计算两天中至少有一天访问网站的用户数:
127.0.0.1:> bitop or unique:users:or:--03_04 unique:users:-- unique:users:--
(integer)
127.0.0.1:> bitcount unique:users:or:--03_04
(integer)
(5)计算Bitmaps中第一个值为tergetBit的偏移量
bitpos key targetBit [start] [end]
下面操作计算2016-04-03这一天当前访问网站的最小用户id:
127.0.0.1:> bitpos unique:users:--
(integer) 0 #索引为1的用户最先访问
除此之外,bitpos还可以指定start和end,分别代表起始字节和结束字节:
127.0.0.1:> bitpos unique:users:--
(integer)
3.Bitmaps性能分析
假设网站有1亿用户,每天独立访问的用户是5000万,如果每天用集合类型和Bitmaps分别存储活跃用户。
很容易看出,在这种情况下Bitmaps能节省很多内存空间,尤其随着时间推移比较客观。
但是Bitmaps并不是万金油,当该网站每天访问的用户很少时,Bitmaps就有点不合时宜了。
注释:由于有5000万活跃用户,每个用户一个id,这就需要8位数字表示,每个数字一个字节因此就是64位。
Bitmaps的更多相关文章
- Displaying Bitmaps Efficiently 显示图片相关
http://developer.android.com/training/displaying-bitmaps/index.html .手机内存资源有限 .Bitmap占用的内存大 .App有时需要 ...
- 使用Redis bitmaps进行快速、简单、实时统计
原文:Fast, easy, realtime metrics using Redis bitmaps (http://blog.getspool.com/2011/11/29/fast-easy-r ...
- 高效使用Bitmaps(三) 神奇的Cache
转载:http://my.oschina.net/rengwuxian/blog/184650 应用的场景 假设你开发了一个聊天程序,它的好友列表中显示从网络获取的好友头像.可是如果用户发现每次进入好 ...
- 高效使用Bitmaps(一) 大Bitmap的加载
转载:http://my.oschina.net/rengwuxian/blog/182885 高效使用Bitmaps有什么好处? 我们常常提到的“Android程序优化”,通常指的是性能和内存的优化 ...
- android 如何分析java.lang.IllegalArgumentException: Cannot draw recycled bitmaps异常
这类问题的分析,通常你需要找到bitmap对象已经在那个位置recyle,然后检查代码. 如何定位的位置,其中代码具有对bitmap 目的recyle.能够 Bitmap.java的recycle方法 ...
- Android IllegalArgumentException: Cannot draw recycled bitmaps解决方法
在编码图集过程中,出现了Android IllegalArgumentException: Cannot draw recycled bitmaps错误. 大致意思是:不能使用已经被回收的bitmap ...
- Tkinter Bitmaps
Tkinter Bitmaps: 你会使用这个属性显示一个位图.有以下类型的可用位图. 你会使用这个属性显示一个位图.有以下类型的可用位图.: "error" "g ...
- 在UI线程之外,多线程处理Bitmaps
多线程处理Bitmaps 上一篇,我们讨论了:Android有效的处理Bitmap,降低内存 ,可是最好不要运行在主线程(UI线程),假设图片是本地的或者网络的又或者是其它地方的. 图片载入的 ...
- Loading Large Bitmaps Efficiently
有效地加载大位图文件-Loading Large Bitmaps Efficiently 图像有各种不同的形状和大小.在许多情况下,他们往往比一个典型应用程序的用户界面(UI)所需要的资源更大.例如, ...
随机推荐
- Idea下Maven的使用
一.导入maven结构的web工程 (1)在Intellij IDEA中选择File->New->Project from Version Control->Subversion. ...
- SQLITE3 --详解
由于我主要负责我们小组项目数据库模块的部分所以这几天都一直在研究在iphone中最为常用的一个简单数据库sqlite,自己也搜集很多资料,因此在 这里总结一下这几天的学习成果: Sqlite 操作简明 ...
- 解决unknown import path "golang.org/x/sys/unix": unrecognized import path "golang.org/x/sys"
问题描述 当我们使用 go get.go install.go mod 等命令时,会自动下载相应的包或依赖包.但由于众所周知的原因,类似于 golang.org/x/... 的包会出现下载失败的情况. ...
- MFC中 编辑框输入换行功能
首先修改编辑框的属性: Multiline 设为true , Auto HScroll 设为true , Auto VScroll 设为 true . 然后响应PreTranslateMessage( ...
- POJ-1190-生日蛋糕-DFS(深搜)-枚举-多重剪枝
题目链接: 这个题目非常好,有难度:能够好好的多做做: #include<iostream> #include<string> #include<cstdio> # ...
- 点击页面li显示li中文字
<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN" "http://www.w3.org/ ...
- 原生JavaScript技巧大收集100个
原生JavaScript技巧大收集 1.原生JavaScript实现字符串长度截取function cutstr(str, len) { var temp; var icount = 0; var p ...
- Openstack nova代码部分凝视一
做个一个没怎么学过python的菜鸟.看源代码是最好的学习方式了,如今就从nova入手,主要凝视一下 nova/compute/api.py 中的 create_instance函数 def _cre ...
- PhoneNumber
项目地址:PhoneNumber 简介:一个获取号码归属地和其他信息(诈骗.骚扰等)的开源库 一个获取号码归属地和其他信息(诈骗.骚扰等)的开源库.支持本地离线(含归属地.骚扰.常用号码)和网络( ...
- iOS 依据文本内容为TextView动态定义高度
解决方式: 1.定义一个textview,在storyboard中设定该textview的constraints. 2.将高度的constraint定义到头文件里:(直接拖拽) @property ( ...