当前位置:网站首页>Redis和Mysql数据同步的两种方案
Redis和Mysql数据同步的两种方案
2022-08-03 09:16:00 【m0_54853420】
**
利用数据库本身进行手动同步
**
具体操作
- 在MySQL中对要操作的数据设置触发器Trigger,监听操作
- 客户端(NodeServer)向MySQL中写入数据时,触发器会被触发,触发之后调用MySQL的UDF函数
- UDF函数可以把数据写入到Redis中,从而达到同步的效果
好处
同步效率比较高,一般结合延迟双删和缓存超时策略进行手动同步
延迟双删和缓存超时简介
首先删除redis中的数据,然后更新数据库中的数据,最后过一段时间(大概一分钟)再对redis中数据做一次删除.这样就可能尽量保证我们的redis数据被删掉,但极端情况下,旧数据还是没有删掉,所以我们设计让它的过期时间短一点,这样就算没删掉也可以很快过期.
利用Canal进行数据同步
Canal简介
阿里旗下,用来监控数据库内部数据变化的软件.
Canal会伪装成mysql的备份机.当mysql进行数据操作以后,会将记录记载到日志中,同时发送给备份机,当canal接收到日志数据后,就会进行后续数据同步工作.
数据更新(以首页广告更新为例)
当mysql内部的数据发生改变之后.我们的数据监控微服务,就可以根据canal获取到最新更新的数据.,将我们的position字段的值提取出来(代表当前广告的位置),之后数据监控的微服务就会把这个值发送到rabbitmq上,rabbitmq收到这个消息后,就会把这个消息保存到自己的内存中.这时运营的微服务就会从rabbitmq中把值拿出来,调用nginx中的更新数据的lua脚本进行数据更新.
先自我介绍一下,小编13年上师交大毕业,曾经在小公司待过,去过华为OPPO等大厂,18年进入阿里,直到现在。深知大多数初中级java工程师,想要升技能,往往是需要自己摸索成长或是报班学习,但对于培训机构动则近万元的学费,着实压力不小。自己不成体系的自学效率很低又漫长,而且容易碰到天花板技术停止不前。因此我收集了一份《java开发全套学习资料》送给大家,初衷也很简单,就是希望帮助到想自学又不知道该从何学起的朋友,同时减轻大家的负担。添加下方名片,即可获取全套学习资料哦
边栏推荐
猜你喜欢
015-Balanced binary tree (1)
10 minutes to get you started chrome (Google) browser plug-in development
MySQL的分页你还在使劲的limit?
Exception: Dataset not found. Solution
手把手教你如何自制目标检测框架(从理论到实现)
面试突击71:GET 和 POST 有什么区别?
兔起鹘落全端涵盖,Go lang1.18入门精炼教程,由白丁入鸿儒,全平台(Sublime 4)Go lang开发环境搭建EP00
dflow入门2——Slices
开发工具之版本控制
机器学习(公式推导与代码实现)--sklearn机器学习库
随机推荐
Unity关于编辑器扩展自定义标签,方便扩展Inspector
10 Convolutional Neural Networks for Deep Learning 2
Let‘s Encrypt 使用
RSTP(端口角色+端口状态+工作机制)|||| 交换机接口分析
Exception: Dataset not found. Solution
LeetCode第三题(Longest Substring Without Repeating Characters)三部曲之二:编码实现
MySql的初识感悟,以及sql语句中的DDL和DML和DQL的基本语法
【LeetCode】101.对称二叉树
STP生成树(端口状态+端口角色+收敛机制 )|||| STP优化技术( uplinkfast技术+Portfast技术+backbonefast技术 )详解
scala reduce、reduceLeft 、reduceRight 、fold、foldLeft 、foldRight
110 MySQL interview questions and answers (continuous updates)
cert-manager使用
MySQL的分页你还在使劲的limit?
dflow入门5——Big step & Big parameter
英文语法-状语从句
批量将PNG格式转化为JPG格式
【LeetCode】112. Path sum
dflow入门2——Slices
【微信小程序】底部有安全距离,适配iphone X等机型的解决方案
多线程下的单例模式