当前位置: 首页 > news >正文

济南网站建设正规公司网络营销分类

济南网站建设正规公司,网络营销分类,wordpress镜像教程,在线客服外包对于redis出现大key的情况,可以通过以下几种方式来解决: 1.分布式存储:将大key拆分成多个小的key,分别存储在不同的节点上。 2.数据过期:对于大key中不经常使用的数据,可以使用redis自带的过期特性&#xf…

对于redis出现大key的情况,可以通过以下几种方式来解决:

1.分布式存储:将大key拆分成多个小的key,分别存储在不同的节点上。

2.数据过期:对于大key中不经常使用的数据,可以使用redis自带的过期特性,将其自动删除,降低内存占用。

3.压缩数据:对于大key中的数据进行压缩,减小其占用的内存空间。

4.内存分片:将大key分片存储在不同的内存块中,从而降低其占用的内存空间

Redis 大 Key 对持久化有什么影响?

大 Key 对 AOF 日志的影响:

Redis 提供了 3 种 AOF 日志写回硬盘的策略,分别是:
1.Always,它的意思是每次写操作命令执行完后,同步将 AOF 日志数据写回硬盘;
2.Everysec,它的意思是每次写操作命令执行完后,先将命令写入到 AOF 文件的内核缓冲区,然后每隔一秒将缓冲区里的内容写回到硬盘;
3.No,就是每次写操作命令执行完后,先将命令写入到 AOF 文件的内核缓冲区,再由操作系统决定何时将缓冲区内容写回硬盘。

这三种策略只是在控制 fsync() 函数的调用时机

  • Always 策略就是每次写入 AOF 文件数据后,就执行 fsync() 函数;
    Everysec 策略就会创建一个异步任务来执行 fsync() 函数;
    No 策略就是永不执行 fsync() 函数;

1.当使用 Always 策略的时候,如果写入是一个大 Key,主线程在执行 fsync() 函数的时候,阻塞的时间会比较久,因为当写入的数据量很大的时候,数据同步到硬盘这个过程是很耗时的。
2.当使用 Everysec 策略的时候,由于是异步执行 fsync() 函数,所以大 Key 持久化的过程(数据同步磁盘)不会影响主线程。
3.当使用 No 策略的时候,由于永不执行 fsync() 函数,所以大 Key 持久化的过程不会影响主线程。

大 Key 对 AOF 重写和 RDB 的影响

当 AOF 日志写入了很多的大 Key,AOF 日志文件的大小会很大,那么很快就会触发 AOF 重写机制

AOF 重写机制和 RDB 快照(bgsave 命令)的过程,都会分别通过 fork() 函数创建一个子进程来处理任务。

1.在通过 fork() 函数创建子进程的时候,内核会把父进程的页表复制一份给子进程,如果页表很大,复制过程会很耗时,在执行 fork 函数的时候就会发生阻塞现象。fork 函数是由 Redis 主线程调用的,如果 fork 函数发生阻塞,那么就会阻塞 Redis 主线程。由于 Redis 执行命令是在主线程处理的,所以当 Redis 主线程发生阻塞,就无法处理后续客户端发来的命令。

2.如果创建完子进程后,父进程对共享内存中的大 Key 进行了修改,那么内核就会发生写时复制,会把物理内存复制一份,由于大 Key 占用的物理内存是比较大的,那么在复制物理内存这一过程中,也是比较耗时的,于是父进程(主线程)就会发生阻塞

总结

当 AOF 写回策略配置了 Always 策略,如果写入是一个大 Key,主线程在执行 fsync() 函数的时候,阻塞的时间会比较久,因为当写入的数据量很大的时候,数据同步到硬盘这个过程是很耗时的。

AOF 重写机制和 RDB 快照(bgsave 命令)的过程,都会分别通过 fork() 函数创建一个子进程来处理任务。会有两个阶段会导致阻塞父进程(主线程):

1.创建子进程的途中,由于要复制父进程的页表等数据结构,阻塞的时间跟页表的大小有关,页表越大,阻塞的时间也越长;
2.创建完子进程后,如果父进程修改了共享数据中的大 Key,就会发生写时复制,这期间会拷贝物理内存,由于大 Key 占用的物理内存会很大,那么在复制物理内存这一过程,就会比较耗时,所以有可能会阻塞父进程。

大 key 除了会影响持久化之外,还会有以下的影响:

1.客户端超时阻塞。由于 Redis 执行命令是单线程处理,然后在操作大 key 时会比较耗时,那么就会阻塞 Redis,从客户端这一视角看,就是很久很久都没有响应。

2.引发网络阻塞。每次获取大 key 产生的网络流量较大,如果一个 key 的大小是 1 MB,每秒访问量为 1000,那么每秒会产生 1000MB 的流量,这对于普通千兆网卡的服务器来说是灾难性的。

3.阻塞工作线程。如果使用 del 删除大 key 时,会阻塞工作线程,这样就没办法处理后续的命令。

4.内存分布不均。集群模型在 slot 分片均匀情况下,会出现数据和查询倾斜情况,部分有大 key 的 Redis 节点占用内存多,QPS 也会比较大。

如何避免大 Key 呢?

在设计阶段,就把大 key 拆分成一个一个小 key。
或者,定时检查 Redis 是否存在大 key ,如果该大 key 是可以删除的,不要使用 DEL 命令删除,因为该命令删除过程会阻塞主线程,而是用 unlink 命令(Redis 4.0+)删除大 key,因为该命令的删除过程是异步的,不会阻塞主线程。

http://www.mmbaike.com/news/34961.html

相关文章:

  • dede微电影网站模板百度网页版下载
  • 网站的提示公告做滚动字幕品牌推广方案ppt
  • 广东网站建设联系电话推广普通话作文
  • 电商平台开发公司seo推广外包企业
  • 广告公司网站源码下载什么平台打广告比较好免费的
  • 成都做网站建设的公司网络营销公司名字
  • 自己做网站怎么弄热搜在哪里可以看
  • 东莞网站seo公司深圳网络运营推广公司
  • 东莞网站设计建设公司seo外推
  • 用于做网站的软件短视频获客系统
  • 做设计在哪个网站接单域名站长工具
  • 如何查看一个网站做的外链推广app赚佣金平台
  • 怎么让百度蜘蛛围着网站爬取建网站怎么赚钱
  • 集团公司网站改版方案线下推广100种方式
  • 嘉兴城乡建设局门户网站建设网站前的市场分析
  • 网站上的动态背景怎么做的seo服务 收费
  • mysql php动态网站开发关键词优化和seo
  • 服务行业做网站游戏挂机赚钱一小时20
  • 做图素材的网站有哪些seo指的是
  • 茶叶网站建设的优势北京seo服务行者
  • wordpress主题 移动端seo软件全套
  • 集团网站建设的要求小红书信息流广告
  • 宁波网站建设网站开发万网域名官网
  • 如何百度搜到自己的网站图们网络推广
  • 什么网站必须要flash专门开发小程序的公司
  • 找人做网站注意事项sem优化技巧
  • 东莞市建设规划局网站首页2022网站快速收录技术
  • 贵阳专业的翻译公司一个具体网站的seo优化方案
  • 优秀创意广告设计赏析seo推广岗位职责
  • 昆明做网站本地推广最有效的方法