• 数据库与缓存不一致,你会怎么办?

数据库与缓存不一致,你会怎么办?

2025-04-27 10:41:07 栏目:宝塔面板 92 阅读

今天聊聊数据库yu缓存的一致性问题。

数据库主从,为什么会不一致?

先回顾下,无缓存时,数据库主从不一致问题。


如上图,发生的场景是,写后立刻读:

  • 主库一个写请求(主从没同步完成);
  • 从库接着一个读请求,读到了旧数据;
  • 最后,主从同步完成;

导致的结果是:主动同步完成之前,会读取到旧数据。

可以看到,主从不一致的影响时间很短,在主从同步完成后,就会读到新数据。

缓存与数据库,什么时候会不一致?

再看,引入缓存后,缓存和数据库不一致问题。

如上图,发生的场景也是,写后立刻读:

  • (1+2)先一个写请求,淘汰缓存,写数据库;
  • (3+4+5)接着立刻一个读请求,读缓存,cache miss,读从库,写缓存放入数据,以便后续的读能够cache hit(主从同步没有完成,缓存中放入了旧数据);
  • (6)最后,主从同步完成;

导致的结果是:旧数据放入缓存,即使主从同步完成,后续仍然会从缓存一直读取到旧数据。

可以看到,加入缓存后,导致的不一致影响时间会很长,并且最终也不会达到一致。

为什么会出现这类不一致?

如上所述,缓存与数据库数据不一致,根本上是由数据库主从不一致引起的。当主库上发生写操作之后,从库binlog同步的时间间隔内,读请求,可能导致有旧数据入缓存。

假如主从不一致没法彻底解决,引入缓存之后,binlog同步时间间隔内,也无法避免读旧数据。

但是,有没有办法做到,即使引入缓存,不一致不会比“不引入缓存”更糟呢?

这是更为实际的优化目标。

思路转化为:在从库同步完成之后,如果有旧数据入缓存,应该及时把这个旧数据淘汰掉。

缓存与数据库不一致,可以怎么优化?

如上图所述,在并发读写导致缓存中读入了脏数据之后:

  • (6)主从同步;
  • (7)通过工具订阅从库的binlog,这里能够最准确的知道,从库数据同步完成的时间;
  • (8)从库执行完写操作,向缓存再次发起删除,淘汰这段时间内可能写入缓存的旧数据;

如此这般,至少能够保证,引入缓存之后,主从不一致,不会比没有引入缓存更坏。

知其然,知其所以然。

思路比结论更重要。

本文地址:https://www.yitenyun.com/108.html

搜索文章

Tags

数据库 API FastAPI Calcite 电商系统 MySQL Web 应用 异步数据库 数据同步 ACK 双主架构 循环复制 TIME_WAIT 运维 负载均衡 JumpServer SSL 堡垒机 跳板机 HTTPS 服务器 管理口 HexHub Docker 服务器性能 JumpServer安装 堡垒机安装 Linux安装JumpServer Deepseek 宝塔面板 Linux宝塔 生命周期 esxi esxi6 root密码不对 无法登录 web无法登录 SQL 查询 序列 核心机制 Windows Windows server net3.5 .NET 安装出错 HTTPS加密 锁机制 Windows宝塔 Mysql重置密码 开源 PostgreSQL 存储引擎 宝塔面板打不开 宝塔面板无法访问 查看硬件 Linux查看硬件 Linux查看CPU Linux查看内存 行业 趋势 Oracle 处理机制 无法访问宝塔面板 Undo Log 机制 优化 万能公式 连接控制 监控 机器学习 Redis InnoDB 数据库锁 Spring 动态查询 异步化 响应模型 Serverless 无服务器 语言 ES 协同 group by 索引 openHalo 技术 scp Linux的scp怎么用 scp上传 scp下载 scp命令 Postgres OTel Iceberg 分页查询 工具 缓存方案 缓存架构 缓存穿透 高可用 存储 GreatSQL 连接数 数据 主库 SVM Embedding R edis 线程 日志文件 MIXED 3 Linux 安全 R2DBC 国产数据库 SQLite-Web SQLite 数据库管理工具 加密 场景 Netstat Linux 服务器 端口 启动故障 防火墙 黑客 ​Redis 推荐模型 Recursive 云原生 自定义序列化 RocketMQ 长轮询 配置 共享锁 SQLark 向量数据库 大模型 OB 单机版 AI 助手 Hash 字段 PG DBA 不宕机 Rsync 信息化 智能运维 Ftp 磁盘架构 Python 电商 系统 向量库 Milvus 架构 业务 Canal 数据分类 分库 分表 修改DNS Centos7如何修改DNS IT运维 redo log 重做日志 流量 频繁 Codis 传统数据库 向量化 • 索引 • 数据库 线上 库存 预扣 filelock MVCC 语句 MongoDB MCP 开放协议 同城 双活 MySQL 9.3 PostGIS 人工智能 推荐系统 聚簇 非聚簇 sftp 服务器 参数 mini-redis INCR指令 Doris SeaTunnel 缓存 Redisson 锁芯 高效统计 今天这篇文章就跟大家 失效 千万级 大表 数据类型 工具链 prometheus Alert 主从复制 代理 数据备份 虚拟服务器 虚拟机 内存 事务 Java 开发 INSERT COMPACT 发件箱模式 SSH EasyExcel MySQL8 分布式架构 分布式锁​ 窗口 函数 聚簇索引 非聚簇索引 数据结构 ZODB 容器 崖山 新版本 引擎 性能 Web QPS 高并发 网络架构 网络配置 分页 数据脱敏 加密算法 RDB AOF 速度 服务器中毒 Go 数据库迁移 Web 接口 B+Tree ID 字段 分布式 集中式 Redis 8.0 核心架构 订阅机制 数据集成工具 自动重启 OAuth2 Token 读写 Redka 容器化 网络故障 播客 模型 数据页 MGR 分布式集群 微软 SQL Server AI功能 DBMS 管理系统 JOIN StarRocks 数据仓库 池化技术 连接池 SpringAI 排行榜 排序 Caffeine CP 原子性 Entity 网络 部署 事务隔离 Valkey Valkey8.0 LRU 业务场景 Pottery Testcloud 云端自动化 数据字典 兼容性 dbt 数据转换工具 分页方案 排版 优化器 关系数据库 意向锁 记录锁 事务同步 sqlmock 1 ReadView 悲观锁 乐观锁 AIOPS 单点故障 单线程 UUIDv7 主键 仪表盘 日志 Weaviate InfluxDB 对象 Order UUID ID Pump 编程 Crash 代码 RAG HelixDB Ansible IT 双引擎 产业链 订单 分布式锁 Zookeeper 字典 恢复数据 LLM List 类型 线程安全 国产 用户 慢SQL优化 表空间 拦截器 动态代理 解锁 调优 Next-Key RR 互联网 快照读 当前读 视图 GitHub Git count(*) count(主键) 行数 神经系统 矢量存储 数据库类型 AI代理 查询规划 算法 CAS 技巧 多线程 并发控制 恢复机制 闪回