当前位置:网站首页>Redis和Mysql数据同步的两种方案
Redis和Mysql数据同步的两种方案
2022-08-03 09:16:00 【m0_54853420】
**
利用数据库本身进行手动同步
**
具体操作
- 在MySQL中对要操作的数据设置触发器Trigger,监听操作
- 客户端(NodeServer)向MySQL中写入数据时,触发器会被触发,触发之后调用MySQL的UDF函数
- UDF函数可以把数据写入到Redis中,从而达到同步的效果
好处
同步效率比较高,一般结合延迟双删和缓存超时策略进行手动同步
延迟双删和缓存超时简介
首先删除redis中的数据,然后更新数据库中的数据,最后过一段时间(大概一分钟)再对redis中数据做一次删除.这样就可能尽量保证我们的redis数据被删掉,但极端情况下,旧数据还是没有删掉,所以我们设计让它的过期时间短一点,这样就算没删掉也可以很快过期.
利用Canal进行数据同步
Canal简介
阿里旗下,用来监控数据库内部数据变化的软件.
Canal会伪装成mysql的备份机.当mysql进行数据操作以后,会将记录记载到日志中,同时发送给备份机,当canal接收到日志数据后,就会进行后续数据同步工作.
数据更新(以首页广告更新为例)
当mysql内部的数据发生改变之后.我们的数据监控微服务,就可以根据canal获取到最新更新的数据.,将我们的position字段的值提取出来(代表当前广告的位置),之后数据监控的微服务就会把这个值发送到rabbitmq上,rabbitmq收到这个消息后,就会把这个消息保存到自己的内存中.这时运营的微服务就会从rabbitmq中把值拿出来,调用nginx中的更新数据的lua脚本进行数据更新.
先自我介绍一下,小编13年上师交大毕业,曾经在小公司待过,去过华为OPPO等大厂,18年进入阿里,直到现在。深知大多数初中级java工程师,想要升技能,往往是需要自己摸索成长或是报班学习,但对于培训机构动则近万元的学费,着实压力不小。自己不成体系的自学效率很低又漫长,而且容易碰到天花板技术停止不前。因此我收集了一份《java开发全套学习资料》送给大家,初衷也很简单,就是希望帮助到想自学又不知道该从何学起的朋友,同时减轻大家的负担。添加下方名片,即可获取全套学习资料哦
边栏推荐
猜你喜欢
【愚公系列】2022年07月 Go教学课程 026-结构体
AD环境搭建
110 MySQL interview questions and answers (continuous updates)
SQL Daily Practice (Nioke New Question Bank) - Day 5: Advanced Query
【LeetCode】zj面试-把字符串转换成整数
Flink Yarn Per Job - 提交应用
Redis集群概念与搭建
LeetCode第三题(Longest Substring Without Repeating Characters)三部曲之二:编码实现
LINGO 18.0 software installation package download and installation tutorial
MySQL-TCL语言-transaction control language事务控制语言
随机推荐
面试突击71:GET 和 POST 有什么区别?
What exactly does a firmware engineer do?
mysql8安装步骤教程
flutter 应用 抓包
合并两个有序链表
固件工程师到底是干什么?
【论文笔记】一种基于启发式奖赏函数的分层强化学习方法
Scala parallel collections, parallel concurrency, thread safety issues, ThreadLocal
CSP-S2019 Day2
MySQL——几种常见的嵌套查询
Batch PNG format can be converted to JPG format
【字节面试】word2vector输出多少个类别
SQL每日一练(牛客新题库)——第5天:高级查询
AUC的两种计算方式
AD环境搭建
QT中线程调用GUI主线程控件的问题
Add Modulo 10 (规律循环节,代码实现细节)
【快手面试】Word2vect生成的向量,为什么可以计算相似度,相似度有什么意义?
STP生成树选举结果查看及验证
10分钟带你入门chrome(谷歌)浏览器插件开发