对于片段缓存，业界有成熟的解决方案，还有一个所谓的W3C标准：ESI（Edge Side Include） 。

ESI本身没有什么，只是一个XML的标签集合。ESI和SSI（Server Side Include）很相似，做过ASP开发的都熟悉这么一个标签：

  1. <!--#include src="header.inc" -->

IIS碰到这么一个标签后，会把header.inc里面的东西合并到当前的页面，这样做的好处是header.inc本身可以复用了，你可以在多个页面include它。

ESI的功能也是类似的，只不过解析和合并它的任务一般落到缓存服务器或代理上：

  1.    1: <esi:include src="/welcome" />
  1.    2: <ul>
  1.    3: #foreach($book in $books)
  1.    4: <li>$book.name</li>
  1.    5: #end
  1.    6: </ul>

比如对于上面这个片段，esi:include标签那里本来是应该显示特定于每个用户的欢迎信息的，就因为这一点整个页面不能缓存太可惜了。这个时候ESI粉墨登场。缓存服务器会将整个页面cache，然后它发现这儿有个ESI标签，它会根据src指定的地址去源服务器请求内容，然后将其合并到缓存的页面中，然后将完整的内容发送到客户端。整个过程类似下图所示：

这样我们就不需要每次都去数据库查询那个图书列表了，因为图书列表可能更新的很缓慢。这样大大的降低了Web服务器的压力。

既然ESI是一个规范，那么肯定有遵循这个规范的实现。比如大名鼎鼎的Squid就有支持ESI的模块。不过本文要介绍的是Varnish。Varnish是一个反向代理，使用缓存对HTTP加速，可以把它放到你的Web服务器的前面，对内容缓存，跟Squid的目的相似。不过因为Squid想干的事儿实在是太多，它已经不再是一个纯粹的用户缓存加速的方向代理了，所以显得太过于臃肿，而比较起来Varnish更专注，更轻便。根据网站上的数据显示，Varnish表现出来的性能比Squid更好，而且占用的资源更少。

下面我就简单的描述一下如何安装Varnish以及配置使用ESI。

安装

我是在Mac上安装Varnish的，从源代码编译过去的。基本上是一路命令下去，在configure的时候碰到缺少libpcre，用port装上pcre就可以了：

  1.    1: $wget http://repo.varnish-cache.org/source/varnish-2.1.5.tar.gz
  1.    2: $tar zxvf varnish-2.1.5.tar.gz
  1.    3: $cd varnish-2.1.5
  1.    4: $sh autogen.sh
  1.    5: $sh configure
  1.    6: $make
  1.    7: $make install

根据环境不同，可能缺少一些依赖，我在安装的过程中就缺少libpcre。

Varnish默认是安装在/usr/local/sbin目录下:varnishd。是daemo。

配置

根据上面那幅图可以看出，Varnish并不自己提供服务，它只是作为一个缓存服务器。那么就必须有一个后端的服务器提供应用程序的服务。那我们就需要让Varnish知道到哪儿去请求后端服务器。这个是通过配置文件设置的，Varnish的默认配置文件在/usr/local/etc/varish/default.vcl。

打开后我们会发现一段被注释的代码，取消注释将其指向你的后端服务器(比如IIS)：

  1.    1: backend default {
  1.    2:      .host = "127.0.0.1";
  1.    3:      .port = "8080";
  1.    4: }

配置好后，启动Varnish，然后去看看效果，启动的命令是：

  1.    1: sbin yuyi$sudo ./varnishd -a 0.0.0.0:80 -f /usr/local/etc/varnish/default.vcl -s malloc,500M

我简单的介绍下这几个选项，更详细的可以看man。

-a指定Varnish鉴定的地址。如果你的配置是上图所示，那么端口应该是80。如果你没有指定-a，那么默认配置使用/etc/services中的配置，一般情况下就是80。而-f指定配置文件的地址，默认情况下就是default.vcl，除非你想使用别的配置文件。

最有趣的是-s选项，它用来指定存储方式，以及缓存的大小。比如这里是malloc，那就是使用内存作为缓存，你还可以使用file，使用磁盘作为缓存。后面是缓存大小，500兆。还可以指定K,G,T等，大小写都可以。

运行后我们去浏览器打开http://127.0.0.1看看。为了测试你可以在页面输出一个DateTime.Now，然后刷新页面看看是不是每次都变化。

Varnish还有个不错的工具：varnishlog，打开后可以看到用户访问的一些情况。

好了，安装和简单配置就介绍这么多，那如何使用ESI呢？其实很简单，分为两个步骤，首先将你的页面上需要施加不同缓存策略的片段切分，放到不同的连接中。

比如原来你的首页混沌一片：有热点新闻板块、通知板块、还有广告以及显示用户登录的板块。而它们原来很可能都是由index.aspx处理的。如果你想有针对性的对这些板块施加缓存策略，那么就应该将其独立开，使用不同的连接（控制器）来处理：

  1.    1: <html>
  1.    2:     <head>
  1.    3:         <title>index</title>
  1.    4:     </head>
  1.    5:     <body>
  1.    6:         <p>Welcome yuyijq</p>
  1.    7:         <div>
  1.    8:         <h3>Hot News</h3>
  1.    9:         <ul>
  1.   10:         <li>庆祝奥特曼45岁生日</li>
  1.   11:         <li>拉登挂了</li>
  1.   12:         </ul>
  1.   13:         </div>
  1.   14:         <div>
  1.   15:         <h3>通知</>
  1.   16:         <ul>
  1.   17:         <li>机房维护通知</li>
  1.   18:         </ul>
  1.   19:         </div>
  1.   20:      </body>
  1.   21: <html>

现在我们要拆分：  hotnews->hotnews.aspx  welcome->welcome.aspx

然后使用ESI标签分离：

  1.    1: <html>
  1.    2:     <head>
  1.    3:         <title>index</title>
  1.    4:     </head>
  1.    5:     <body>
  1.    6:         <esi:include src="/welcome.aspx" />
  1.    7:         <esi:include src="hotnews.aspx" />        
  1.    8:         <div>
  1.    9:         <h3>通知</>
  1.   10:         <ul>
  1.   11:         <li>机房维护通知</li>
  1.   12:         </ul>
  1.   13:         </div>
  1.   14:      </body>
  1.   15: <html>

注意的是welcome.aspx和hotnews.aspx现在输出的是两个片段，不是完整的页面。

这些都准备好后，就是启用Varnish对ESI的处理了。

配置

还是编辑default.vcl文件。Varnish的配置能力非常强大，这个vcl是Varnish Configuration Language。刚才我们仅仅是配置一个后端服务器，现在让我们打开default.vcl仔细欣赏一下：

  1. sub vcl_recv {
  1. }
  1.  
  1. sub vcl_pipe {
  1. }
  1.  
  1. sub vcl_pass {
  1. }
  1.  
  1. sub vcl_hash {
  1. }
  1.  
  1. sub vcl_hit {
  1. }
  1.  
  1. sub vcl_miss {
  1. }
  1.  
  1. sub vcl_fetch {
  1. }
  1.  
  1. sub vcl_deliver {
  1. }
  1.  
  1. sub vcl_error {
  1. }
  1.  

你会看到有vcl_recv,vcl_pipe,vcl_pass,vcl_hash,vcl_hit等函数。这些函数就代表一个请求进入Varnish所通过的阶段(参见这里)。就像一个管道一样，你可以在这些管道上做些自定义的处理。所以配置性非常强大。现在我们只对vcl_fetch函数做一下简单修改：

  1. sub vcl_fetch {
  1.      if(req.url == "/welcome.aspx"){
  1.         return (pass);
  1.      }
  1.      if (req.url == "/index.aspx") {
  1.         esi;
  1.      }
  1. }

如果请求的url是/welcome.aspx就直接pass，也就是不做任何处理，请求直接递交给后端应用服务器（IIS）。如果请求是/index.aspx，也就是我们上面列出的那个包含esi标签的页面，就对其进行ESI处理，这样Varnish就会解析这个页面，看看缓存中有没有，如果有的话则从缓存中取出页面，并将其与从后端服务器获取的welcome.aspx片段合并，然后直接发送回请求。

用Varnish处理ESI就这么简单，不过使用Varnish之前我们还得对其某些参数进行配置，比如缓存多长时间啊等等。默认情况下Varnish会缓存120秒，你可以通过管理功能对其进行配置，还可以通过在vcl里对某些模块进行精细的控制。

管理

还记得我们是怎样启动Varnish的么，如果在启动参数里加上-T 127.0.0.1:5000，那么我们就可以使用telnet对Varnish进行管理了。我们只需要telnet上这个端口，然后可以使用很多丰富的命令了，更多细节留给你尝试吧。

两种方式的比较

前一篇文章介绍的使用Velocity自定义标签来实现片段缓存和这一篇介绍的使用ESI都有自己的优缺点。

使用Velocity自定义标签的方案工作在应用程序这一层，这样开发人员有最大的控制权力，而且实现起来也比较简单，所使用的也都是大家都熟悉的技术，但问题是它还是由应用程序服务器来处理得，可以说它减轻了一部分应用程序服务器和数据库服务器的压力，但还有一部分压力还是需要它来承担，而且在应用程序中解决所使用的缓存必定是和应用程序所采用的缓存机制一样（当然你也可以为此独立使用一个缓存），对缓存服务器也有部分压力。

而使用ESI的方案，它需要运维团队的配置，甚至需要修改服务器配置的架构（添加了前端服务器），如果在多部门协调比较困难的项目中，这种方案还会遇到一些阻力。

但是它带来的好处确实显而易见的。首先ESI是一个W3C标准，我更倾向于采用标准的做法。而且Varnish这样的方向代理，它本来就擅长这个，它可以完全把这部分压力从应用程序服务器和缓存服务器上接管过来，而且会处理的更出色。

由此可见什么方案都是需要权衡各方利弊，得到一个平衡的效果啊。

http://blog.csdn.net/jiedushi/article/details/6405723

ESI+varnish页面片段缓存的更多相关文章

  1. varnish页面缓存服务

    varnish页面缓存服务 https://www.cnblogs.com/L-dongf/p/9310144.html http://blog.51cto.com/xinzong/1782669 阅 ...

  2. ASP.NET缓存全解析3：页面局部缓存 转自网络原文作者李天平

    有时缓存整个页面是不现实的,因为页的某些部分可能在每次请求时都需要变化.在这些情况下,只能缓存页的一部分.顾名思义,页面部分缓存是将页面部分内容保存在内存中以便响应用户请求,而页面其他部分内容则为动态 ...

  3. ehcache 页面整体缓存和局部缓存

    页面缓存是否有必要?. 这样说吧,几乎所有的网站的首页都是访问率最高的,而首页上的数据来源又是非常广泛的,大多数来自不同的对象,而且有可能来自不同的db ,所以给首页做缓存是很必要的.那么主页的缓存策 ...

  4. ehcache实现页面整体缓存和页面局部缓存

    之前写过spring cache和ehcache的基本介绍和注解实现缓存管理,今天记录下web项目的页面缓存技术. 页面缓存是否有必要?. 这样说吧,几乎所有的网站的首页都是访问率最高的,而首页上的数 ...

  5. Yii的缓存机制之片段缓存

      一.首先在main.php配置缓存组件 在components里面添加cache项.代码如下: // application components 'components'=>array( ...

  6. yii2.0缓存篇之片段缓存

    片段缓存指的是缓存页面内容中的某个片段.默认缓存 60秒. return $this->renderPartial("ca");                        ...

  7. HTML页面和JSP页面禁止缓存

    一.JSP页面禁止缓存: 防止浏览器缓存当前访问的JSP动态页面,可以采用如下的方式进行设置,此效果如下的“HTML禁止缓存”: % 将过期日期设置为一个过去时间response.setHeader( ...

  8. html页面清除缓存

    需求:页面每次打开时清除本页面的缓存. 页面打开时,由于缓存的存在,刚刚更新的数据有时无法在页面得到刷新,当这个页面作为模式窗口被打开时问题更为明显. 解决办法为: (1) 用HTML标签设置HTTP ...

  9. ASP.NET缓存全解析2：页面输出缓存 转自网络原文作者李天平

    页面输出缓存是最为简单的缓存机制,该机制将整个ASP.NET页面内容保存在服务器内存中.当用户请求该页面时,系统从内存中输出相关数据,直到缓存数据过期.在这个过程中,缓存内容直接发送给用户,而不必再次 ...

随机推荐

  1. 工作笔记：复制文件--从windows到ubuntu，再到fedora

    最近在测试跨平台类库,于是写了一些小程序. 当然主要利用vs进行主要的代码开发.eclipse进行linux的调试. 那么需要不时同步项目文件. 考虑到项目简单,所以没有使用svn. 1. 从wind ...

  2. Docker Hello World容器运行报错的解决办法

    费了好大力气从Docker官网下载了Docker Community Editor的安装镜像,Docker.dmg, 总共将近500MB,双击进行安装: 命令行里使用docker version查看版 ...

  3. C++虚析构函数的使用

    如果,你设计的程序里,释放对象实例的时候,有“使用某个基类的指针,来释放它指向的派生类的实例”这种用法出现的话,那么,这个基类的destructor就应该设计成virtual的. 如果,基类不是vir ...

  4. 尺取法 || POJ 2739 Sum of Consecutive Prime Numbers

    给一个数 写成连续质数的和的形式,能写出多少种 *解法:先筛质数 然后尺取法 **尺取法:固定区间左.右端点为0,如果区间和比目标值大则右移左端点,比目标值小则右移右端点               ...

  5. 多线程test

    import java.io.UnsupportedEncodingException; import java.util.HashMap; import java.util.Map; import ...

  6. 标准库中的智能指针shared_ptr

    智能指针的出现是为了能够更加方便的解决动态内存的管理问题.注:曾经记得有本书上说可以通过vector来实现动态分配的内存的自动管理,但是经过试验,在gcc4.8.5下是不行的.这个是容易理解的,vec ...

  7. SDOI2011 拦截导弹

    题目描述 题解: 对于第一问,我们求二维LIS即可; 对于第二问,我们可以记录向前最长长度,向前最长方案数,向后最长长度,向后最长方案数. 其实改改树状数组即可. 还有,方案数一定要开double. ...

  8. Linux基础学习-RHEL7.4之YUM更换CentOS源

    1.配置YUM本地源 1.挂载镜像 [root@qdlinux ~]# mount /dev/cdrom /mnt 2.查看是否挂载成功 [root@qdlinux ~]# df -h Filesys ...

  9. 美团技术分享：大众点评App的短视频耗电量优化实战

    美团技术专栏: 关注MAYOU18 前言 美团测试团队负责App的质量保证工作,日常除了App的功能测试以外,还会重点关注App的性能测试.现在大家对手机越来越依赖,而上面各App的耗电量,直接影响了 ...

  10. 如何用纯 CSS 创作一个 3D 文字跑马灯特效

    效果预览 在线演示 按下右侧的"点击预览"按钮在当前页面预览,点击链接全屏预览. https://codepen.io/zhang-ou/pen/GdrrZq 可交互视频教程 此视 ...