关于双写重复数据问题

老师，你好，我最近在做数据迁移，将一个旧的库数据迁移到新的库，采用的是如下双写方案

如果在开启双写期间，新写入的数据同时写入新库和旧库，这时写入到新库的数据与新库已经有的数据重复咋办？有什么方法可以避免吗？

收起

1回答

风间影月 2022-12-14 20:34:14

不建议迁移的时候同时再给用户写入，有风险的。以稳定为主吧~

提问者慕运维4436765 #1

但双写这样做会比较平滑，用户过渡比较舒服。如果迁移的时候直接封旧库写，一些在旧库途中的数据没有保留下来，这个不是有风险吗？这个有更好的方法吗？

2022-12-14 20:42:36
风间影月 #2

我们以前有过一次迁移，我们半夜里执行的，对外维护，所以不存在继续写旧库问题。如果都要写，又要稳定，又要考虑事务一致性，以及高并发场景，风险很大嗯，鱼与熊掌不可兼得啊~~

2022-12-14 20:44:57
风间影月 #3

不过你可以考虑使用offset，把当前以及以前的都迁移，标记之后的用canal同步到临时库，最终再合并。不过后面还是一直会有新数据写入旧库的问题存在，死循环啊~~

2022-12-14 20:47:17