引言

针对于如今计算机的CPU和网络设施,相应用程序来说,运行效率的瓶颈。已经不是代码的长度(实现同一个功能)和带宽了,而是,代码訪问资源的过程。即:让我们的程序慢下来的罪魁祸首就是IO操作。

程序从硬盘上读取数据是一个很花费时间的操作,由于我们如今所使用的硬盘是机械式的,你想机械的执行速度和电的速度,那是一个级别上的选手吗?

为了解决程序的瓶颈,人们提出了一种想法:使用空间换取时间。程序訪问硬盘用的时间长。那就让数据放到内存中,让程序訪问内存,这样不就节省了时间。这样确实剩下了我们程序获取数据时的等待时间,可是。我们的内存却是被占用了。

我们大家都知道,内存这个资源对于计算机来说,是很紧缺和有限的(就那么多),假设我们计算机的内存资源都被这些数据使用了。那么一定会影响我们程序的执行的,你想。假设此时程序再须要一片内存空间的话,计算机会有什么反应,不用说,一定进行虚拟内存处理,虚拟内存是什么?硬盘上的空间。你看,我们费了半天劲又绕到了这个瓶颈,这不得不偿失嘛。

当然。上面的那种情况是程序和缓存数据共用一个计算机的内存。假设。这个程序使用的人少。那么程序和缓存数据在一个计算机上仅仅有积极的影响,没有负面的影响,可是,假设我们程序推广出去了,并且被全部人所接受,致使我们server每一分钟都有10万用户的訪问量。此时,上述的那种情况就会严重影响程序的效率了。

为了解决上述的问题,于是出现了分布式缓存。硬盘上的数据。缓存在别的计算机(不是程序执行的计算机)的内存上,并且。能够缓存的计算机的个数不止一个,能够是n个。这个就是本篇博客的主要内容:分布式缓存Memcache(主讲)和Redis(做个简单介绍)

操作流程

下载Memcache服务端;启动服务;下载.net平台的驱动;应用程序中加入驱动的引用;编敲代码

详细操作(Memcache)

下载Mecachedserver(win版)。安装并启动server。

打开命令窗体。切换到memcached文件文件夹,然后。输入:memcached.exe –d install和memcached.exe –d start。此时安装并启动了服务。引入对应的驱动(dll)

编程代码例如以下:

staticvoidMain(string[] args)

{

//组成memcache集群

//string[]servers
= { "127.0.0.1:11211","10.0.9.20:11211" };集群

string[]servers = { "127.0.0.1:11211" };

//初始化对象池

SockIOPool pool = SockIOPool.GetInstance();

//SockIOPoolpool = SockIOPool.GetInstance("test1");

pool.SetServers(servers);

pool.InitConnections = 3;

pool.MinConnections = 3;

pool.MaxConnections = 5;

pool.SocketConnectTimeout = 1000;

pool.SocketTimeout = 3000;

pool.MaintenanceSleep = 30;

pool.Failover =
true;

pool.Nagle =
false;

//生成对象

pool.Initialize();

//client实例

MemcachedClient mc = new
MemcachedClient();

//不压缩

mc.EnableCompression =
false;

//mc.PoolName= "test1";//获得指定对象池的对象

mc.Set("key1","Value1",DateTime.Now.AddMinutes(10));

objectobj = mc.Get("key1");

Console.WriteLine(obj);

Console.ReadKey();

}

集群问题

Memcache存储数据的原理

先把key做一个哈希算法,得到哈希值;哈希值除以memcacheserver个数,取余,得出存放数据的server

一致性哈希原理

暂时添加一个memcacheserver,则之前key-value存放的server就会发生变化。此时取之前的值就会出现故障;此时,我们能够使用一致性哈希原理:每一个server相应的是一段值,此时添加一个server。出现错误的概略会降低,可是,没有办法根治

内存存储管理

内存分配

Memcache把内存分成大小不同的块。当数据来了后,找到一个最小匹配上块。来存储数据

内存使用

採用CAS(CAS: ClientAssessService)协议,而不是採用锁,解决多并发訪问题

client读取数据时。获得一个CAS-ID。当写入缓存前,先检查clientCAS-ID和server端CAS-ID(最后一个client訪问时的CAS-ID)是否同样,同样。能够改动。否则,不同意改动,这个和我们使用的版本号控制的原理大致是一样的

内存回收

Lazy Expiration(惰性检測)

当用户通过key获取数据时才检查数据是否过期。最长过期时间为30d

LRU(Least RecentlyUsed)

算法:最近最少使用算法。

闲置内存—》过期内存—》最少使用

Memcache和Redis的差别

都是分布式缓存;官方提供Linux版,但都不提供win版;都能够实现集群的,仅仅只是。Memecache是在client设置,而Redis是在server端设置。Memcache提供的存储类型单一。Redis提供的类型比較丰富。提供了非常多种语言的驱动。

总结

Memcache和Redisserver都是分布式缓存思想的详细化,使用他们,能够使我们的web应用程序高效的被很多其它的用户使用。

分布式缓存Memcache和Redis的更多相关文章

  1. 如何用分布式缓存服务实现Redis内存优化

    Redis是一种支持Key-Value等多种数据结构的存储系统,其数据特性是“ALL IN MEMORY”,因此优化内存十分重要.在对Redis进行内存优化时,先要掌握Redis内存存储的特性比如字符 ...

  2. python运维开发(十一)----python操作缓存memcache、redis

    内容目录: 缓存 memcache redis memcache Memcached 是一个高性能的分布式内存对象缓存系统,用于动态Web应用以减轻数据库负载.它通过在内存中缓存数据和对象来减少读取数 ...

  3. 分布式缓存 memcache学习

    1.使用分布式缓存是为了解决多台机器共享信息的问题,通过访问一个ip和端口来可以访问不同的IIS服务器 2.memcache基础原理 在Socket服务器端存储数据是以键值对的形式存储 内存处理的算法 ...

  4. fourinone分布式缓存研究和Redis分布式缓存研究

    最近在写一个天气数据推送的项目,准备用缓存来存储数据.下面分别介绍一下fourinone分布式缓存和Redis分布式缓存,然后对二者进行对比,以供大家参考. 1  fourinone分布式缓存特性 1 ...

  5. 组件-------(一)redis系列--安装部署redis+实现redis分布式缓存 java+Spring+redis

    目的:解决单机session不能共享问题,插入查询数据库时间效率问题,实现分布式缓存. 准备材料:Redis 下载链接 http://pan.baidu.com/s/1dEGTxvV 相关jar包如果 ...

  6. 【分布式缓存系列】Redis实现分布式锁的正确姿势

    一.前言 在我们日常工作中,除了Spring和Mybatis外,用到最多无外乎分布式缓存框架——Redis.但是很多工作很多年的朋友对Redis还处于一个最基础的使用和认识.所以我就像把自己对分布式缓 ...

  7. 分布式缓存Memcache

    Memcached是分布式的,也就是说它不是本地的.它基于网络连接(当然它也可以使用localhost)方式完成服务,本身它是一个独立于应用的程序或守护进程(Daemon方式). Memcached使 ...

  8. 第十二节:Asp.Net Core 之分布式缓存(SQLServer和Redis)

    一. 整体说明 1. 说明 分布式缓存通常是指在多个应用程序服务器的架构下,作为他们共享的外部服务共享缓存,常用的有SQLServer.Redis.NCache.     特别说明一下:这里的分布式是 ...

  9. 分布式缓存 — memcache

    MemCache是一个自由.源码开放.高性能.分布式的分布式内存对象缓存系统,用于动态Web应用以减轻数据库的负载.它通过在内存中缓存数据和对象来减少读取数据库的次数,从而提高了网站访问的速度.Mem ...

随机推荐

  1. python之docstrinigs

    # -*- coding: cp936 -*- #python 27 #xiaodeng #docstrinigs #文档字符串惯例 ''' 1.多行字符串 2.首行以大写字母开始,以句号结束 3.第 ...

  2. Ubuntu16.04编译安装Redis Desktop Manager

    Redis Desktop Manager for OSX&Ubuntu 的安装版是收费的, 如果自己编译则是免费的. 安装过程参考官方提供的文档  http://docs.redisdesk ...

  3. 多线程和Socket——在线聊天室

    多线程开发和Socket技术 一.进程和线程 进程:每个应用程序对应一个进程: 线程:一个进程至少包含一个线程,线程要和CPU进行交互. 多线程并发(可以理解为):"同一时间"执行 ...

  4. ios中项目

    上一个版本 http://pan.baidu.com/share/link?shareid=2183244558&uk=923776187 下载地址  http://pan.baidu.com ...

  5. HDFS分布式文件系统(The Hadoop Distributed File System)

    The Hadoop Distributed File System (HDFS) is designed to store very large data sets reliably, and to ...

  6. mysql insert if not exists防止插入重复记录的方法(转)

    MySQL 当记录不存在时插入(insert if not exists) 在 MySQL 中,插入(insert)一条记录很简单,但是一些特殊应用,在插入记录前,需要检查这条记录是否已经存在,只有当 ...

  7. C# WinForm开发系列 - 文章索引

    该系列主要整理收集在使用C#开发WinForm应用文章及相关代码, 平时看到大家主要使用C#来开发Asp.Net应用,这方面的文章也特别多,而关于WinForm的文章相对少很多,而自己对WinForm ...

  8. Postgresql 正则表达式

    在postgresql中使用正则表达式时需要使用关键字“~”,以表示该关键字之前的内容需匹配之后的正则表达式,若匹配规则不需要区分大小写,可以使用组合关键字“~*”: 相反,若需要查询不匹配这则表达式 ...

  9. eclipse插件安装的四种方法

    Eclipse插件的安装方法 1.在eclipse的主目录(ECLIPSE_HOME,比如在我的机器上安装的目录是:D:\eclipse)有一个plugins的目录,这种方法的插件安装非常简单,只要将 ...

  10. 转 Kubernetes 入门 概念理解

    你闺女也能看懂的插画版Kubernetes指南 原创  2016-06-30 作者 周小璐 译 编者按:Matt Butcher是Deis的平台架构师,热爱哲学,咖啡和精雕细琢的代码.有一天女儿走进书 ...