一,为什么要使用redis作本地缓存?

1,使用缓存通常会有三层

当使用openresty作为web服务器时,我们更看重是的它可以通过lua编程的扩展能力,就openresty而言,它可以实现的功能非常多,

提高响应速度是web服务中非常重要的功能,

使用缓存通常会有三层:

本地缓存:存在于本地机器上,直接通过nginx访问,避免网络io;

redis cluster:存储更多的供lua访问的数据,也是通过nginx访问直接返回,相比前一层缓存,增加了网络io,但仍然避免了对业务系统的访问;

业务缓存:供运行在tomcat/php-fpm/go http中内的业务代码访问。

可以比较得到本地缓存是响应速度最快的,通常可以在10ms内对请求进行响应。

我们看到的很多经过优化的BAT等大厂的站点都能在极短时间内响应请求,就是经过了层层优化的结果。

2,这里会提供一个例子:使用redis做商品详情页的cache:

流程:当用户访问时,

先从redis中获取cache内容,

如果redis中不存在此value,则会改为访问后端业务系统获取cache

说明:在生产环境中,为方便更新,通常会采用redis的主从架构,

每台业务nginx上所配备的redis的数据能得到实时更新

说明:刘宏缔的架构森林是一个专注架构的博客,地址:https://www.cnblogs.com/architectforest

对应的源码可以访问这里获取: https://github.com/liuhongdi/

说明:作者:刘宏缔 邮箱: 371125307@qq.com

二,nginx的配置文件:

    upstream backenditem {
server 127.0.0.1:8000;
} server {
listen 8000;
server_name 8000.test.com; location / {
default_type 'text/html';
content_by_lua_block {ngx.say("hello world,this is path backend from 8000:uri:"..ngx.var.request_uri)}
}
} server {
listen 82;
server_name test.com;
location ~ /backenditem/(.*) {
rewrite /backenditem(/.*) $1 break;
proxy_next_upstream error timeout;
proxy_pass http://backenditem;
}
location /item {
default_type text/html;
content_by_lua_file /data/luacache/webroot/item_redis_cache.lua;
} location / {
default_type 'text/html';
content_by_lua_block {ngx.say("default path:uri:"..ngx.var.request_uri)}
}
}

说明:1,端口8000的server是一个demo,生产环境中,它应该是使用tomcat/php-fpm/django之类的业务系统

2,location ~ /backenditem/(.*) :负责upstream到后端业务系统,

注意这里要做一次 rewrite /backenditem(/.*) $1 break;   ,作用是去掉用来标识要跳转到后端的backenditem字串

3,content_by_lua_file    此处用绝对路径指定了lua代码的程序文件

三,lua程序文件:   item_redis_cache.lua

--指定要访问的lua包所在的路径
package.path = package.path..";/data/luacache/webroot/config/?.lua;/data/luacache/webroot/lib/?.lua"
local config = require "config_constant"
local readhttp = require "read_http"
local returnjson = require "return_json"
--redis连接池工厂
local redis_factory = require('redis_factory')(config.redisConfig)
--获取redis的连接实例
local ok, redis_a = redis_factory:spawn('redis_a') --用于接收前端数据的对象
local args=nil
--获取前端的请求方式 并获取传递的参数
local request_method = ngx.var.request_method
--判断是get请求还是post请求并分别拿出相应的数据
if "GET" == request_method then
args = ngx.req.get_uri_args()
elseif "POST" == request_method then
ngx.req.read_body()
args = ngx.req.get_post_args()
--兼容请求使用post请求,但是传参以get方式传造成的无法获取到数据的bug
if (args == nil or args.data == null) then
args = ngx.req.get_uri_args()
end
end --ngx.log(ngx.ERR,"args.key:",args.key) if args.itemid == nil or args.itemid=="" then local json = returnjson.getjson("1",'key not exist or key is empty',"")
--ngx.log(ngx.ERR,"json:",json)
ngx.say(json) else --获取前端传递的itemid
local itemid = args.itemid --在redis中获取itemid对应的值
local va = redis_a:get(itemid) if va == ngx.null or va == nil then --ngx.log(ngx.ERR, "redis not found content, back to http, itemid : ", itemid)
local url="/backenditem/item"
va = readhttp.read(url,itemid)
ngx.print(returnjson.getjson(0,itemid,va))
else
--响应前端
ngx.say(returnjson.getjson(0,itemid,va))
end end

四,lua访问redis的配置文件: config_constant.lua

config = {}

config.redisConfig = {
redis_a = { -- your connection name
--ip
host = '127.0.0.1',
--端口
port = 6379,
--密码
pass = '',
--超时时间,如果是测试环境debug的话,这个值可以给长一点;如果是正式环境,可以设置为200
timeout = 120000,
--redis的库
database = 0,
},
}
return config

五,lua程序文件:read_http.lua:用来从后端业务系统得到response

local read_http = {}
function read_http.read(url,id)
local resp = ngx.location.capture(url, {
method = ngx.HTTP_GET,
args = {id = id}
})
if not resp then
ngx.log(ngx.ERR, "request error :", err)
return
end
if resp.status ~= 200 then
ngx.log(ngx.ERR, "request error, status :", resp.status)
return
end
return resp.body
end return read_http

六,lua程序:return_json.lua :返回json字串

local return_json = {}
function return_json.getjson(status,msg,data)
local json = '{"status":"'..status..'","msg":"'..msg..'","data":"'..data..'"}'
return json
end return return_json

七,此项目的github地址:

  https://github.com/liuhongdi/luacache

八,测试效果:

1,当有商品存在于redis中的返回 :如图

2,当商品不存在于redis中的返回:   如图

3,当参数错误时的返回 :如图

九,文中涉及到的各平台的版本查看:

[root@localhost luacache]# cat /etc/redhat-release
CentOS Linux release 8.1.1911 (Core)
[root@localhost luacache]# /usr/local/openresty/bin/openresty -V
nginx version: openresty/1.15.8.2
built by gcc 8.2.1 20180905 (Red Hat 8.2.1-3) (GCC)
built with OpenSSL 1.1.0k 28 May 2019
TLS SNI support enabled
[root@localhost luacache]# /usr/local/soft/redis5/bin/redis-server --version
Redis server v=5.0.7 sha=00000000:0 malloc=libc bits=64 build=8e31d2ed9a4c9593

openresty使用redis作本地缓存的更多相关文章

  1. springboot+mybatis 用redis作二级缓存

    1.加入相关依赖包: <?xml version="1.0" encoding="UTF-8"?> <project xmlns=" ...

  2. 本地缓存google.guava及分布式缓存redis 随笔

    近期项目用到了缓存,我选用的是主流的google.guava作本地缓存,redis作分布式 缓存,先说说我对本地缓存和分布式缓存的理解吧,可能不太成熟的地方,大家指出,一起 学习.本地缓存的特点是速度 ...

  3. lua模块demo(redis,http,mysql,cjson,本地缓存)

    1. lua模块demo(redis,http,mysql,cjson,本地缓存) 1.1. 配置 在nginx.conf中设置lua_shared_dict my_cache 128m; 开启ngi ...

  4. 本地缓存,Redis缓存,数据库DB查询(结合代码分析)

    问题背景 为什么要使用缓存?本地缓存/Redis缓存/数据库查询优先级? 一.为什么要使用缓存 原因:CPU的速度远远高于磁盘IO的速度问题:很多信息存在数据库当中的,每次查询数据库就是一次IO操作所 ...

  5. redis订阅发布消息操作本地缓存

    Redis 本地缓存+远程缓存方案 使用纯java的ehcache作为本地缓存 Reids 作为远程分布式缓存 解决redis缓存压力过大,提高缓存速度,以及缓存性能. Redis和ehcache缓存 ...

  6. 使用本地缓存快还是使用redis缓存好?

    使用本地缓存快还是使用redis缓存好? Redis早已家喻户晓,其性能自不必多说. 但是总有些时候,我们想把性能再提升一点,想着redis是个远程服务,性能也许不够,于是想用本地缓存试试!想法是不错 ...

  7. 缓存子系统如何设计(Cachable tag, Memcache/redis support, xml config support, LRU/LFU/本地缓存命中率)

    大家对这段代码肯定很熟悉吧: public List<UserInfo> SearchUsers(string userName) { string cacheKey=string.For ...

  8. 用Redis作Mysql数据库缓存

    使用redis作mysql数据库缓存时,需要考虑两个问题: 1.确定用何种数据结构存储来自Mysql的数据; 2.在确定数据结构之后,用什么标识作为该数据结构的键. 直观上看,Mysql中的数据都是按 ...

  9. redis(二)--用Redis作MySQL数据库缓存

    用Redis作MySQL数据库缓存,必须解决2个问题.首先,应该确定用何种数据结构存储来自mysql的数据:在确定数据结构之后,还要考虑用什么标识作为该数据结构的键. 直观上看,Mysql中的数据都是 ...

随机推荐

  1. 10.深入k8s:调度的优先级及抢占机制源码分析

    转载请声明出处哦~,本篇文章发布于luozhiyun的博客:https://www.luozhiyun.com 源码版本是1.19 上一篇我们将了获取node成功的情况,如果是一个优先pod获取nod ...

  2. 第24课 - #pragma 使用分析

    第24课 - #pragma 使用分析 1. #pragma简介 (1)#pragma 是一条预处理器指令 (2)#pragma 指令比较依赖于具体的编译器,在不同的编译器之间不具有可移植性,表现为两 ...

  3. Android实现二值点阵图识别

    好好学习,天天向上 本文已收录至我的Github仓库DayDayUP:github.com/RobodLee/DayDayUP,欢迎Star 前言 我这几天在做一个东西,就是一张像二维码这样的 n*n ...

  4. js中数组Array对象的方法sort()的应用

    一. sort()方法的介绍 //给一组数据排序 var arrNum = [12,1,9,23,56,100,88,66]; console.log("排序前的数组:"+arrN ...

  5. C#开发PACS医学影像处理系统(十八):Dicom使用LUT色彩增强和反色

    在医生阅片确诊的过程中,当发线疑似病灶时在灰度显示下有时并不清晰,这时候就需要色彩增强效果来使灰度图像变为彩色图像. LUT可以简单的理解为0-255的颜色映射值,例如:彩虹编码,将其打包成LUT格式 ...

  6. 阿里服务器docker部署

    首先本人是购买的阿里云服务器,虽然是1g的内存,不过部署一些项目还是没问题的,学生也有一个优惠服务器,好像是70多2g内存的,还是很舒服的,学生党可以试着部署一下,下面呢我就说一下我自己部署的步骤: ...

  7. 云计算openstack核心组件——neutron网络服务(9)

    一.虚拟机获取 ip: 用 namspace 隔离 DHCP 服务   Neutron 通过 dnsmasq 提供 DHCP 服务,而 dnsmasq 通过 Linux Network Namespa ...

  8. Urule开源版系列5——RuleSetParser解析过程

    接上期Urule开源版系列4--Core包核心接口之规则解析过程 之前源码到了Parser,这期详细解析下RuleSetParser的解析过程 1.主流程 特殊处理一个属性 循环处理元素 当元素名称是 ...

  9. 黑菜菌的JAVA学习笔记

    简介 本文是笔者对<JAVA编程思想>的学习笔记.以自己的思维理解来写下这篇文章,尽可能地简练,易懂.本文将随本人学习进度实时更新 对象导论 抽象过程 汇编语言是对底层机器码的抽象,而面向 ...

  10. MySQL 5.7主从复制

    简介 主从复制是利用MySQL复制机制将数据复制到另外一台或多台MySQL服务器上,被复制的服务器称为主服务器,复制的服务器称为从服务器.一般是一主多从.主从复制的好处主要是数据备份.负载均衡(读写分 ...