查看原文
其他

Nginx+Redis 搭建高性能缓存利器

点击关注 👉 Java架构师技术 2022-07-01
    以下文章来源Java架构师技术,回复”Spring“获惊喜礼包

上一篇推文:为什么前后端分离了,你比从前更痛苦?

大家好,我是Java架构师


一. OpenResty

OpenResty是一个基于 Nginx与 Lua的高性能 Web平台,其内部集成了大量精良的 Lua库、第三方模块以及大多数的依赖项。用于方便地搭建能够处理超高并发、扩展性极高的动态Web 应用、Web 服务和动态网关。

接入层缓存技术就是使用OpenResty的技术用Lua语言进行二次开发。

图片

二.Nginx +redis

下图左边是常用的架构,http请求经过nginx负载均衡转发到tomcat,tomcat再从redis读取数据,整个链路过程是串行的,当tomcat挂掉或者tomcat线程数被消耗完,就无法正常返回数据。

使用OpenResty的lua-resty-redis模块使nginx具备直接访问redis的能力,不占用tomcat线程,Tomcat暂时挂掉仍可正常处理请求,减少响应时长,提高系统并发能力。

图片

三.压缩减少带宽

数据大于1K,nginx压缩再保存到redis:

  • 提高redis的读取速度
  • 减少带宽的占用

压缩会消耗cpu时间,小于1K的数据不压缩tps更高。

OpenResty并没有提供redis连接池的实现,需要自己用lua实现redis的连接池,在网上已有实现的例子http://wiki.jikexueyuan.com/project/openresty/redis/out_package.html,直接参照使用。

Redis的value值用json格式保存{length:xxx,content:yyy},content是压缩后的页面内容,length是content压缩前的大小,length字段是为了在读取redis时,根据length的大小来判断是否要解压缩content的数据。

使用lua-zlib库进行压缩。

图片

四. 定时更新

按下图第1和第2步定时执行,nginx lua定时器定时请求tomcat页面的url,返回的页面html保存在redis。另外搜索公众号后端架构师后台回复“架构整洁”,获取一份惊喜礼包。

缓存有效期可设置长些,比如1个小时,可保证1个小时内tomcat挂掉,仍可使用缓存数据返回,缓存的定时更新时间可设置短些,比如1分钟,保证缓存快速更新

图片

五.请求转发

浏览器打开页面:

  • nginx先从redis获取页面html
  • redis不存在数据时,从tomcat获取页面,同时更新redis
  • 返回页面HTML给浏览器

图片

六. 单进程定时更新

Nginx的所有worker进程都可以处理前端请求转发到redis,只有nginx worker 0才运行定时任务定时更新redis,lua脚本中通过ngx.worker.id()获取worker进程编号。

图片

七 . 可配置化

通过管理后台配置需要缓存的URL,可配置缓存URL、缓存有效期、定时更新时间,比如modify?url=index&&expire=3600000&&intervaltime=300000&sign=xxxx,sign的值是管理后台secretkey对modify?url=index&&expire=3600000&&intervaltime=300000签名运算得到的,nginx端用相同的secretkey对modify?url=index&&expire=3600000&&intervaltime=300000签名运算,得到的值与sign的值相同则鉴权通过,允许修改nginx的配置。

图片

最后,整理了100多套项目,赠送读者。扫码下方二维码,后台回复赚钱即可获取。

--END--

来源:urlify.cn/ui6zUb

版权申明:内容来源网络,版权归原创者所有。除非无法确认,我们都会标明作者及出处,如有侵权烦请告知,我们会立即删除并表示歉意。谢谢!

往期惊喜:

何谓架构?

一个很酷的后台权限管理系统

支付宝架构师眼中的高并发架构

为什么美国程序员不用加班,而中国程序员就只能996?

如何搭建一台永久运行的个人服务器?

接了个变态需求:生成 Excel + PDF 导出,用 Java 怎么实现?

Spring Boot 实现万能文件在线预览

涨姿势:为什么 Java 中 “1000==1000” 为 false,而 ”100==100“ 为 true?

12 个顶级 Bug 跟踪工具

公司用的 MySQL 团队开发规范,太详细了,建议收藏!

DDD划分领域、子域、核心域、支撑域的目的

面试官写了个双冒号::问我这是什么语法?Java中有这玩意?


扫码关注我们的Java架构师技术

带你全面深入Java

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存