使用 AWS Database Migration Service (AWS DMS) 进行数据迁移

Posted in: AWS DMS

什么是 AWS 数据库迁移服务 (AWS DMS)？

AWS Database Migration Service (AWS DMS) 顾名思义，是将数据库迁移到 AWS 的服务。
其特点如下。

除了 AWS DMS 之外，AWS 还提供服务器迁移服务，例如 AWS Server Migration Service (AWS SMS) 和 AWS Application Migration Service (AWS MGN)。
差异的简要总结如下。

AWS服务器迁移服务（AWS SMS）
主要用例是从本地 VMware 和 Hyper-V 进行大规模迁移。
使用虚拟设备的无代理服务器迁移服务
AWS应用程序迁移服务（AWS MGN）
支持通过简单的迁移流程迁移到 AWS 的迁移服务。
需要在服务器上安装 AWS MGN 代理
（2021 年 11 月更新部分兼容无代理）
AWS数据库迁移服务（AWS DMS）
提前准备好 RDS 或 Aurora 等托管数据库服务后，使用 AWS DMS 迁移数据的服务。
迁移源和目标数据库需要来自 AWS DMS 的互联网/封闭连接

在本文中，我们将实际使用 AWS DMS 并介绍将数据从 EC2 迁移到 RDS 的步骤，就像在本地一样。
两个数据库引擎均使用MySQL，EC2端版本为5.7，RDS端版本为8.0。

请注意，不同数据库引擎之间的迁移是通过使用AWS Schema Conversion Tool（SCT）来实现的，但我们这次不会使用它。
有关 SCT 的更多信息，请参阅以下文档。

另外，在本文中，我们将通过一个从 MySQL 到 MySQL 的数据迁移示例，让您了解如何使用 AWS DMS。
如果源数据库和目标数据库类型相同，首先考虑使用数据库引擎提供的迁移工具，这是实际数据迁移的有效选择。

下图是当前配置的图像。
假设有一个本地服务器，我们将在AWS上准备EC2（Amazon Linux 2）并设置MySQL 5.7。
同样在目标 RDS 上启动 MySQL 8.0。
通过互联网传输数据，并将数据迁移到目标RDS。

注意，通过互联网连接源数据库时，对于MySQL来说，需要授予数据库访问权限，但本文不会对此进行解释。请咨询您的 DBA 等，并设置权限。

设置 AWS Database Migration Service (AWS DMS)。

我们不会解释为 DMS 创建的 VPC 设置，但我们将准备基本的公有子网和私有子网。
详细请参考官方文档。

提前创建复制实例要设置的安全组。

当您首次访问 AWS DMS 控制台时，系统将指导您创建复制实例，首先按如下所述配置子网组。

点击右上角“创建子网组”

创建子网组。

添加子网：这次，我们将仅添加公有子网。
如果保留默认值，此子网组似乎会添加 VPC 中的所有子网。
在验证过程中，我没有意识到这一点，无意中在私有子网中创建了一个复制实例，导致 NW 通信不可用……
标签：设置成本标签等。

接下来，创建一个复制实例。

配置复制实例。

实例类/存储
这次，出于测试目的，实例类为 dms.t3.medium，存储为默认 50GiB。
这种内存和磁盘分配似乎会影响迁移速度。详细请参考官方文档
（如果内存装不下数据，就会写入磁盘，速度会很慢）
选择复制实例的最佳大小 – AWS Database Migration Service

这些是与网络相关的设置。

维护和标签设置。

稍等片刻后，复制实例创建完成。

接下来，创建一个端点。

首先，创建迁移源端点。

如果状态为“成功”，则端点连接测试成功。
单击“创建端点”并稍等片刻即可完成。

如果测试不成功，请检查以下内容：

复制实例是在公有子网中创建的吗？
复制实例的安全组中是否允许出站规则？
您尝试连接的服务器的 FW（在 AWS 中为安全组）是否允许从复制实例进行访问？
- （我还真没注意到这个）
  使用多可用区构建时，不仅允许 DMS 控制台中显示的全局 IP，还允许备用实例的全局 IP。
  在网络接口控制台中，描述字段中写有“DMSNetworkInterface”的接口用于 DMS。