MySQL特定表全量、增量数据同步到消息队列-解决方案

MySQL特定表全量、增量数据同步到消息队列-解决方案

1、原始需求 既要同步原始全量数据,也要实时同步MySQL特定库的特定表增量数据,同时对应的修改、删除也要对应。 数据同步不能有侵入性:不能更改业务程序,并且不能对业务侧有太大性能压力。 应用场景:数据ETL同步、降低业务服务器压力。 2、解决方案 3、canal介

mysql触发器实时检测一条语句进行备份删除思路详解

mysql触发器实时检测一条语句进行备份删除思路详解

问题描述:用户有一个这样一个需求,在一张表里会不时出现“违规”字样的字段,需要在出现这个字段的时候,把整行的数据删掉。这是个采集任务,如果发现有“违规”字样的数据,会整点或者什么时间进行统一上报,也无法对源头进行控制让这种数据不生成。

1253067 TFnetwork_cn