缓存与数据库双写一致性几种策略分析

作者:京东零售 于泷

一、背景

在高并发场景中,为防止大量请求直接访问数据库,缓解数据库压力,常用的方式一般会增加缓存层起到缓冲作用,减少数据库压力。引入缓存,就会涉及到缓存与数据库中数据如何保持一致性问题,本文将对几种缓存与数据库保证数据一致性的使用方式进行分析。为保证高并发性能,以下分析场景不考虑执行的原子性及加锁等强一致性要求的场景,仅追求最终一致性。

二、读取过程

缓存与数据库双写一致性几种策略分析

• 读缓存

• 如果缓存里没有值,那就读取数据库的值

• 同时把这个值写进缓存中

三、更新过程

更新操作有多种策略,各有优劣,主要针对此场景进行分析

策略1:先更新db,再删除缓存(常用的Cache-Aside Pattern旁路缓存)

缓存与数据库双写一致性几种策略分析

问题:

1.如果更新db成功,删缓存失败,将导致数据不一致

2.极端场景,请求A读,B写

1)此时缓存刚好失效 2)A查库得到旧值 3)B更新DB成功

4)B删除缓存 5)A将查到的旧值更新到缓存中

此场景的发生需要步骤2)查db 始终慢于 3)的更新db,才能导致4)先于5)执行,通常db的查询是要快于写入的,所以此极端场景的产生过于严格,不易发生

策略2:先更新db,再更新缓存

缓存与数据库双写一致性几种策略分析

问题:

1.并发更新场景下,更新缓存会导致数据不一致

2.根据读写比,考虑是否有必要频繁同步更新缓存,而且,如果构造缓存中数据过于复杂,或者数据更新频繁,但是读取并不频繁的情况,还会造成不必要的性能损耗

此种方式不推荐

策略3:先更新缓存,再更新db

缓存与数据库双写一致性几种策略分析

同上,不推荐

策略4:先删缓存,再更新db

缓存与数据库双写一致性几种策略分析

先删缓存,虽然解决了策略1中,后删缓存如果失败的场景,但也会发生不一致的问题

例如:请求 A 删除缓存,这时请求B来查,就会击穿到数据库,B读取到旧的值后写入缓存,A正常更新db,由于时间差导致数据不一致的情况

策略5:缓存延时双删

缓存与数据库双写一致性几种策略分析

该策略兼容了策略1和策略4,解决了先删缓存还是后删缓存的问题,如策略1中,更新db后删缓存失败和策略4中的不一致场景,该策略可以将延时时间内(比如延时10ms)所造成的缓存脏数据,再次删除。但是,如果延时删缓存失败,策略4中不一致问题还会发生,同时延时的实现,如创建线程,或者引入mq异步,可能会增加系统复杂度问题。

策略6:变种双删,前置缓存过期时间

缓存与数据库双写一致性几种策略分析

该策略针对策略1中后删缓存失败的场景,前置一层缓存数据过期时间(具体时间根据自身系统本身评估,如可覆盖db读写耗时或一致性容忍度等),更新db后就算删缓存失败,在expire时间后也能保证缓存中无数据。同时,前置expire失败,或者更新db失败,都不会影响数据一致。

能够解决策略4中的问题:请求 A 删除缓存,这时请求B来查,就会击穿到数据库,B读取到旧的值后写入缓存,A正常更新db,由于时间差导致数据不一致的情况,描述图如下:

缓存与数据库双写一致性几种策略分析

本策略中步骤1为expire缓存,不会发生击穿缓存到数据库的情况,数据将直接返回。除非更极端情况,如下图:

expire时间没有覆盖住更新db的耗时,类似策略1中极端场景,此处不赘述

缓存与数据库双写一致性几种策略分析

四、总结

对于每种方案策略,各有利弊,但一致性问题始终存在(文章开头排除了原子性和锁),只是发生的几率在一点点慢慢变小了,方案的评估不仅要根据自身系统的业务场景,如读写比、并发量、一致性容忍度,还要考虑系统复杂度,投入产出比等,寻找最合适的方案。

原文链接:https://www.cnblogs.com/jingdongkeji/p/17333646.html

本站文章如无特殊说明,均为本站原创,如若转载,请注明出处:缓存与数据库双写一致性几种策略分析 - Python技术站

(0)
上一篇 2023年4月19日
下一篇 2023年4月22日

相关文章

  • 一文带你看懂MySQL执行计划

    一文带你看懂MySQL执行计划 什么是MySQL执行计划 MySQL的执行计划(EXPLAIN)是一种用来显示MySQL查询执行数据的工具。它可以告诉你MySQL查询在运算时将会使用哪些索引,哪些数据表以及它们之间的连接方式。 如何查看MySQL执行计划 你可以使用MySQL的EXPLAIN语句来查看执行计划。例如: EXPLAIN SELECT * FRO…

    MySQL 2023年5月19日
    00
  • MySQL子查询详解

    子查询,也被称为嵌套查询,是在一个查询语句中嵌套另一个查询语句的查询。子查询可以作为主查询的查询条件,也可以用于在查询结果中过滤数据。 MySQL中的子查询有以下几个特点: 子查询必须包含在圆括号内。 子查询可以嵌套多层。 子查询可以返回单个值或多个值。 下面是一些常见的子查询例子: 1.查询学生成绩大于班级平均成绩的学生信息: SELECT id, nam…

    MySQL 2023年3月9日
    00
  • 云计算时代前端如何保证开源代码的安全性

    作者:京东零售  张梦雨 云技术和我们的生活息息相关,日常生活中访问的网页,刷的短视频,用的云盘等都是云计算提供的服务。那在云计算时代,前端可以做什么呢? 一、云技术与前端 在前端发展初期,前端只需完成静态页面和交互的开发即可,然后将源文件给后端部署;之后前后端分离,有了工程化的概念,前端需要自己去完成构建、打包、集成、部署,部署方式有通过CI/CD工具进行…

    云计算 2023年4月17日
    00
  • mysql中json_remove函数的使用?

    需求描述:   今天看json记录,可以通过json_remove函数对一个key或多个key从个json记录中去掉. 操作过程: 1.查看一个已经存在的json表 mysql> select * from tab_json; +—-+———————————————————…

    MySQL 2023年4月13日
    00
  • mysql优化连接数防止访问量过高的方法

    MySQL 是一个非常流行的关系型数据库管理系统,它支持多个客户端连接到同一个数据库实例,因此在高访问量的情况下,优化 MySQL 连接数是一项非常重要的工作。以下是 MySQL 优化连接数防止访问量过高的方法的完整攻略: 1. 调整 MySQL 最大连接数限制 MySQL 的最大连接数对服务器承受高并发有着非常重要的影响,如果设置太小,可能导致访问量过高时…

    MySQL 2023年5月19日
    00
  • Python 基于Python从mysql表读取千万数据实践

    基于Python 从mysql表读取千万数据实践   by:授客 QQ:1033553122 场景:   有以下两个表,两者都有一个表字段,名为waybill_no,我们需要从tl_waybill_bar_record表读取1000w条唯一的waybill_no,然后作为INSERT SQL语句的一部分,填充到ts_order_waybill的waybill…

    MySQL 2023年4月13日
    00
  • 一些mysql启动参数的说明和优化方法

    下面是“一些MySQL启动参数的说明和优化方法”的完整攻略。 MySQL启动参数的说明 MySQL启动参数是指在启动时指定的MySQL运行时参数,它们可以控制MySQL的各种行为。下面是一些主要的启动参数: –port=端口号 指定MySQL监听的端口号,缺省为3306端口。 –bind-address=IP地址 指定MySQL运行的IP地址,如果指定为…

    MySQL 2023年5月19日
    00
  • Mysql: LBS实现查找附近的人 (两经纬度之间的距离)

    1. 利用GeoHash封装成内置数据库函数的简易方案; A:Mysql 内置函数方案,适合于已有业务,新增加LBS功能,增加经纬度字段方可,避免数据迁移 B:Mongodb 内置函数方案,适合中小型应用,快速实现LBS功能,性能优于A(推荐)   方案A: (MySQL Spatial)   1、先简历一张表:(MySQL 5.0 以上 仅支持 MyISA…

    MySQL 2023年4月16日
    00
合作推广
合作推广
分享本页
返回顶部