公有云迁移研究——AWS DMS
大纲
- 1 什么是DMS
- 2 DMS的作用
- 3 DMS在迁移的时候都做些什么
- 4 在使用DMS的时候我们需要做些什么
- 5 操作
- 5.1 创建两个数据库终端节点
- 5.2 创建迁移任务
- 6 可能遇到的问题
- 7 总结
在本地机房或其他云往AWS上做迁移时,往往会遇到数据库迁移的任务。如果数据量不是特别大,我们一般会使用AWS DMS做迁移。本文主要介绍下DMS的作用和应用,以及注意事项。
1 什么是DMS
AWS Database Migration Service (AWS DMS) 是一项云服务,可轻松迁移关系数据库、数据仓库、NoSQL数据库及其他类型的数据存储。您可以使用AWS DMS将数据迁移到AWS Cloud。
2 DMS的作用
它用于将数据从源数据存储迁移到目标数据存储。这两个数据存储称为终端节点。您可在使用相同数据库引擎的源和目标终端节点之间迁移。您也可在使用不同数据库引擎的源和目标终端节点之间迁移。
需要注意的是:它不支持关系型数据库到非关系型数据库直接的迁移。
3 DMS在迁移的时候都做些什么
- DMS会创建出表结构
- DMS会创建出主键和唯一索引
- DMS不会创建二级索引
- DMS不会创建非主键约束
- DMS不会创建默认值
4 在使用DMS的时候我们需要做些什么
- 在使用DMS的时候,DMS会将数据原封不动的迁移到目标数据库上。DMS在创建出数据表结构以后,我们需要修复数据库的二级索引,非主键约束和一些字段的默认值。
- 我们还可以创建数据库迁移任务,来实现对数据库的持续迁移。这样我们在项目迁移中保证了线上数据的一致性,迁移完成后方便做数据库层面的切割。
5 操作
5.1 创建两个数据库终端节点
5.2 创建迁移任务
这样迁移任务就创建好了,这时候我们只需要关注迁移任务是否出错。并在结束后修复表的二级索引、非主键约束和字段默认值。
6 可能遇到的问题
问题:迁移完成后部分查询出错和查询变慢。
解决:因为DMS不会迁移源的外键、二级索引和字段默认值,需要在数据迁移后,手工修复上述结构问题。修完后,服务得到了恢复,查询速度也会恢复正常。
7 总结
- 在平时开发项目的时候尽量少用外键约束,这样会增加数据库迁移的复杂度和数据修复的复杂度。
- 迁移完成后要对数据库的表结构进行检查,这样可以降低迁移带来的各种系统灾难。