首页 > 生活 > 百科知识

redis与mysql怎么保证数据一致 redis与mysql保证数据一致步骤

3Ib拜客生活常识网

1、技术整体思路。3Ib拜客生活常识网

MySQL binlog增量订阅消费+消息队列+增量数据更新到redis3Ib拜客生活常识网

1)读Redis:热数据基本都在Redis3Ib拜客生活常识网

2)写MySQL:增删改都是操作MySQL3Ib拜客生活常识网

3)更新Redis数据:MySQ的数据操作binlog,来更新到Redis3Ib拜客生活常识网

2、Redis更新。3Ib拜客生活常识网

1)数据操作主要分为两大块:3Ib拜客生活常识网

一个是全量(将全部数据一次写入到redis)3Ib拜客生活常识网

一个是增量(实时更新)3Ib拜客生活常识网

这里说的是增量,指的是mysql的update、insert、delate变更数据。3Ib拜客生活常识网

2)读取binlog后分析 ,利用消息队列,推送更新各台的redis缓存数据。3Ib拜客生活常识网

这样一旦MySQL中产生了新的写入、更新、删除等操作,就可以把binlog相关的消息推送至Redis,Redis再根据binlog中的记录,对Redis进行更新。3Ib拜客生活常识网

其实这种机制,很类似MySQL的主从备份机制,因为MySQL的主备也是通过binlog来实现的数据一致性。3Ib拜客生活常识网

这里可以结合使用canal(阿里的一款开源框架),通过该框架可以对MySQL的binlog进行订阅,而canal正是模仿了mysql的slave数据库的备份请求,使得Redis的数据更新达到了相同的效果。3Ib拜客生活常识网

3Ib拜客生活常识网

1、技术整体思路。3Ib拜客生活常识网

MySQL binlog增量订阅消费+消息队列+增量数据更新到redis3Ib拜客生活常识网

1)读Redis:热数据基本都在Redis3Ib拜客生活常识网

2)写MySQL:增删改都是操作MySQL3Ib拜客生活常识网

3)更新Redis数据:MySQ的数据操作binlog,来更新到Redis3Ib拜客生活常识网

2、Redis更新。3Ib拜客生活常识网

1)数据操作主要分为两大块:3Ib拜客生活常识网

一个是全量(将全部数据一次写入到redis)3Ib拜客生活常识网

一个是增量(实时更新)3Ib拜客生活常识网

这里说的是增量,指的是mysql的update、insert、delate变更数据。3Ib拜客生活常识网

2)读取binlog后分析 ,利用消息队列,推送更新各台的redis缓存数据。3Ib拜客生活常识网

这样一旦MySQL中产生了新的写入、更新、删除等操作,就可以把binlog相关的消息推送至Redis,Redis再根据binlog中的记录,对Redis进行更新。3Ib拜客生活常识网

其实这种机制,很类似MySQL的主从备份机制,因为MySQL的主备也是通过binlog来实现的数据一致性。3Ib拜客生活常识网

这里可以结合使用canal(阿里的一款开源框架),通过该框架可以对MySQL的binlog进行订阅,而canal正是模仿了mysql的slave数据库的备份请求,使得Redis的数据更新达到了相同的效果。3Ib拜客生活常识网

相关阅读:

暂无相关信息
  • 网站地图 |
  • 声明:登载此文出于传递更多信息之目的,并不意味着赞同其观点或证实其描述。文章内容仅供参考,不做权威认证,如若验证其真实性,请咨询相关权威专业人士。