缓存与数据库双写一致性几种策略分析

作者:京东零售 于泷

一、背景

在高并发场景中,为防止大量请求直接访问数据库,缓解数据库压力,常用的方式一般会增加缓存层起到缓冲作用,减少数据库压力。引入缓存,就会涉及到缓存与数据库中数据如何保持一致性问题,本文将对几种缓存与数据库保证数据一致性的使用方式进行分析。为保证高并发性能,以下分析场景不考虑执行的原子性及加锁等强一致性要求的场景,仅追求最终一致性。

二、读取过程

缓存与数据库双写一致性几种策略分析

• 读缓存

• 如果缓存里没有值,那就读取数据库的值

• 同时把这个值写进缓存中

三、更新过程

更新操作有多种策略,各有优劣,主要针对此场景进行分析

策略1:先更新db,再删除缓存(常用的Cache-Aside Pattern旁路缓存)

缓存与数据库双写一致性几种策略分析

问题:

1.如果更新db成功,删缓存失败,将导致数据不一致

2.极端场景,请求A读,B写

1)此时缓存刚好失效 2)A查库得到旧值 3)B更新DB成功

4)B删除缓存 5)A将查到的旧值更新到缓存中

此场景的发生需要步骤2)查db 始终慢于 3)的更新db,才能导致4)先于5)执行,通常db的查询是要快于写入的,所以此极端场景的产生过于严格,不易发生

策略2:先更新db,再更新缓存

缓存与数据库双写一致性几种策略分析

问题:

1.并发更新场景下,更新缓存会导致数据不一致

2.根据读写比,考虑是否有必要频繁同步更新缓存,而且,如果构造缓存中数据过于复杂,或者数据更新频繁,但是读取并不频繁的情况,还会造成不必要的性能损耗

此种方式不推荐

策略3:先更新缓存,再更新db

缓存与数据库双写一致性几种策略分析

同上,不推荐

策略4:先删缓存,再更新db

缓存与数据库双写一致性几种策略分析

先删缓存,虽然解决了策略1中,后删缓存如果失败的场景,但也会发生不一致的问题

例如:请求 A 删除缓存,这时请求B来查,就会击穿到数据库,B读取到旧的值后写入缓存,A正常更新db,由于时间差导致数据不一致的情况

策略5:缓存延时双删

缓存与数据库双写一致性几种策略分析

该策略兼容了策略1和策略4,解决了先删缓存还是后删缓存的问题,如策略1中,更新db后删缓存失败和策略4中的不一致场景,该策略可以将延时时间内(比如延时10ms)所造成的缓存脏数据,再次删除。但是,如果延时删缓存失败,策略4中不一致问题还会发生,同时延时的实现,如创建线程,或者引入mq异步,可能会增加系统复杂度问题。

策略6:变种双删,前置缓存过期时间

缓存与数据库双写一致性几种策略分析

该策略针对策略1中后删缓存失败的场景,前置一层缓存数据过期时间(具体时间根据自身系统本身评估,如可覆盖db读写耗时或一致性容忍度等),更新db后就算删缓存失败,在expire时间后也能保证缓存中无数据。同时,前置expire失败,或者更新db失败,都不会影响数据一致。

能够解决策略4中的问题:请求 A 删除缓存,这时请求B来查,就会击穿到数据库,B读取到旧的值后写入缓存,A正常更新db,由于时间差导致数据不一致的情况,描述图如下:

缓存与数据库双写一致性几种策略分析

本策略中步骤1为expire缓存,不会发生击穿缓存到数据库的情况,数据将直接返回。除非更极端情况,如下图:

expire时间没有覆盖住更新db的耗时,类似策略1中极端场景,此处不赘述

缓存与数据库双写一致性几种策略分析

四、总结

对于每种方案策略,各有利弊,但一致性问题始终存在(文章开头排除了原子性和锁),只是发生的几率在一点点慢慢变小了,方案的评估不仅要根据自身系统的业务场景,如读写比、并发量、一致性容忍度,还要考虑系统复杂度,投入产出比等,寻找最合适的方案。

原文链接:https://www.cnblogs.com/jingdongkeji/p/17333646.html

本站文章如无特殊说明,均为本站原创,如若转载,请注明出处:缓存与数据库双写一致性几种策略分析 - Python技术站

(0)
上一篇 2023年4月19日
下一篇 2023年4月22日

相关文章

  • MySQL实例crash的案例详细分析

    MySQL实例crash的案例详细分析 背景介绍 MySQL是一个流行的关系型数据库管理系统,但在使用它的过程中,有时会遇到实例crash的情况。实例crash可能由于多种因素引起,如硬件故障、操作系统崩溃、MySQL bug等。 解决步骤 以下是一些解决MySQL实例crash的步骤: 步骤1:收集日志信息 MySQL服务器维护多种日志,包括错误日志、二进…

    MySQL 2023年5月18日
    00
  • 详解MySQL LIKE:模糊查询

    MySQL中的LIKE表示模糊查询,用于匹配字符串中的指定字符或字符模式。在使用LIKE时,可以使用特殊字符来代替指定字符或字符模式: %:代表任意长度(包括0长度)的字符串。 _:代表一个任意字符。 例如,要查找一个以字母“a”开头的所有字符串,可以使用如下语句: SELECT * FROM table_name WHERE column_name LIK…

    MySQL 2023年3月9日
    00
  • mysql中的多行查询结果合并成一个

    原文:http://blog.csdn.net/lifuxiangcaohui/article/details/6132147   SELECT GROUP_CONCAT(md.data1) FROM DATA md,contacts cc WHERE md.conskey=cc.id AND md.mimetype_id= 5 AND md.user_id…

    MySQL 2023年4月13日
    00
  • redhat如何安装php和mysql

    本文小编为大家详细介绍“redhat如何安装php和mysql”,内容详细,步骤清晰,细节处理妥当,希望这篇“redhat如何安装php和mysql”文章能帮助大家解决疑惑,下面跟着小编的思路慢慢深入,一起来学习新知识吧。 redhat安装php和mysql的方法:1、通过“yum install httpd”安装Apache2并启动;2、使用“yum in…

    MySQL 2023年4月12日
    00
  • mysql常见问题解决第1/2页

    MySQL 常见问题的解决可以参考如下攻略: 问题排查步骤 1. 确认 MySQL 服务是否正常启动 运行以下命令确认 MySQL 服务是否正常启动: systemctl status mysqld 如果 MySQL 服务未启动,则运行以下命令启动 MySQL 服务: systemctl start mysqld 2. 检查 MySQL 登录是否成功 尝试使…

    MySQL 2023年5月18日
    00
  • MySQL 原理与优化之Limit 查询优化

    MySQL 原理与优化之Limit 查询优化 在MySQL中,使用LIMIT关键字可以限制返回的记录数,可以有效的提高查询效率;但是如果使用不当,就会出现一些问题,如本文所要介绍的常见的LIMIT查询优化。 Limit查询优化的原理 LIMIT查询优化的核心在于“选择合适的索引”,因为MySQL在执行Limit查询时,需要先进行排序,然后才能保证返回的记录数…

    MySQL 2023年5月19日
    00
  • 使用MySQL的Explain执行计划的方法(SQL性能调优)

    当我们需要分析优化SQL语句的性能时,可以使用MySQL自带的Explain执行计划工具来帮助我们解决问题。以下是使用MySQL的Explain执行计划的方法的详细攻略: 一、准备工作在执行Explain命令之前,我们需要先开启MySQL的查询日志功能。可以通过以下命令开启查询日志: SET global general_log = 1; SET globa…

    MySQL 2023年5月19日
    00
  • 记一次因线上mysql优化器误判引起慢查询事件

    下面我会详细讲解“记一次因线上MySQL优化器误判引起慢查询事件”的完整攻略。 背景 在进行线上MySQL性能优化的过程中,经常会遇到一些奇怪的问题,比如出现奇怪的慢查询,尤其是当使用了ORM框架之后,更容易出现这些问题。在本次攻略中,我们将讨论一次因线上MySQL优化器误判引起的慢查询事件。 问题描述 某天,我们的应用开始出现了一些慢查询,比如说从一个表中…

    MySQL 2023年5月19日
    00
合作推广
合作推广
分享本页
返回顶部