-mysql实时同步redis的简单介绍(2-14-49)

更新时间：2024-09-06 分类：MySQL 浏览量：2

MySQL本文目录一览：

redis缓存原理是sql语句时key值，查询结果resultSet是value，当同一个查询语句访问时（select * from t_product），只要曾经查询过，调用缓存直接返回resultSet，节省了数据库读取磁盘数据的时间。

Redis是一种内存高速cache，如果使用redis缓存，那经常被访问的内容会被缓存在内存中，需要使用的时候直接从内存调取，不知道比硬盘调取快了多少倍，并且支持复杂的数据结构，应用于许多高并发的场景中。

AOF 是以appendonly方式进行数据的储存的，开启AOF模式后，所有存进redis内存的数据都会进入os cache中，然后默认1秒执行一次fsync写入追加到appendonly.aof文件中。

内存淘汰管理机制Memory Management 当内存占满之后，redis提供缓存淘汰机制。

读取数据的时候先从redis里面查，若没有，再去数据库查，同时写到redis里面，并且要设置失效时间。

二者数据同步的关键在于mysql数据库中主键，方案是在redis启动时区mysql读取所有表键值存入redis中，往redis写数据是，对redis主键自增并进行读取，若mysql更新失败，则需要及时清除缓存及同步redis主键。

插入时同步，比如先更新了oracle，再更新redis，这个要靠代码逻辑来做。谁先谁后得看设计了。

使用阿里开源的 canal 作为数据同步工具。总的来说有两种方案本文把两种方式都实现下。如果公司有统一的平台接入binlog的话，canal+mq应该是比较好的解耦的方式。

答案是肯定的，下面通过canal结合Kafka来实现mysql与redis之间的数据同步。架构设计通过上述结构设计图可以很清晰的知道用到的组件：MySQL、Canal、Kafka、ZooKeeper、Redis。

SAGA或者TCC - 这两种需要业务代码的大量配合。通过业务代码来补偿一致性。现实当中有XA协议。比如Ehcache是支持XA协议的。但是性能表现不佳，运维也麻烦。

通过MySQL UDF + Trigger同步数据到Gearman MySQL要实现与外部程序互通的最好方式还是通过MySQL UDF（MySQL user defined functions）来实现。

1、mysql2redis_mission.sql文件就是将mysql数据的输出数据格式和redis的输入数据格式协议相匹配，从而大大缩短了同步时间。

2、而Redis的主从同步和数据快照有关，Redis定期将内存中数据作快照保存在文件中，mater只要将文件发送给slave更新就可以了。

3、同时要注意避免冲突，在redis启动时去mysql读取所有表键值存入redis中，往redis写数据时，对redis主键自增并进行读取，若mysql更新失败，则需要及时清除缓存及同步redis主键。

4、二者数据同步的关键在于mysql数据库中主键，方案是在redis启动时区mysql读取所有表键值存入redis中，往redis写数据是，对redis主键自增并进行读取，若mysql更新失败，则需要及时清除缓存及同步redis主键。

5、我们大多倾向于使用这种方式，也就是将数据库中的变化同步到Redis，这种更加可靠。Redis在这里只是做缓存。

6、并使用官方的语法和命令，Redis是StrictRedis的子类，用于向后兼容旧版本的redis-py。