入门_数据复制服务 DRS_用户指南_华为云

(1)

用户指南

文档版本 46

发布日期 2021-11-30

(2)

非经本公司书面许可，任何单位和个人不得擅自摘抄、复制本文档内容的部分或全部，并不得以任何形式传播。

商标声明

和其他华为商标均为华为技术有限公司的商标。

本文档提及的其他所有商标或注册商标，由各自的所有人拥有。

注意

您购买的产品、服务或特性等应受华为公司商业合同和条款的约束，本文档中描述的全部或部分产品、服务或特性可能不在您的购买或使用范围之内。除非合同另有约定，华为公司对本文档内容不做任何明示或暗示的声明或保证。

由于产品版本升级或其他原因，本文档内容会不定期进行更新。除非另有约定，本文档仅作为使用指导，本文档中的所有陈述、信息和建议不构成任何明示或暗示的担保。

华为技术有限公司

地址：深圳市龙岗区坂田华为总部办公楼邮编：518129

网址： https://www.huawei.com

客户服务邮箱：[email protected] 客户服务电话：4008302118

(3)

1 ^入门

如果您初次使用数据复制服务（Data Replication Service，简称DRS），请参阅《数据复制服务快速入门》，帮助您了解华为云数据复制服务并进行迁移任务的创建。

● 实时迁移

● 备份迁移

● 实时同步

● 数据订阅

● 实时灾备

(11)

2 ^权限管理

2.1 创建用户并授权使用 DRS

如果您需要对您所拥有的DRS进行精细的权限管理，您可以通过企业管理或统一身份认证服务（Identity and Access Management，简称IAM）实现。

● 通过企业管理实现的具体操作，请您参考项目管理。

● 通过IAM实现的具体操作，您可以：

– 根据企业的业务组织，在您的华为云帐号中，给企业中不同职能部门的员工创建IAM用户，让员工拥有唯一安全凭证，并使用DRS资源。

– 根据企业用户的职能，设置不同的访问权限，以达到用户之间的权限隔离。

– 将DRS资源委托给更专业、高效的其他华为云帐号或者云服务，这些帐号或者云服务可以根据权限进行代运维。

如果华为云帐号已经能满足您的要求，不需要创建独立的IAM用户，您可以跳过本章节，不影响您使用DRS服务的其它功能。

本章节为您介绍通过IAM对用户授权的方法，操作流程如图2-1所示。

前提条件

给用户组授权之前，请您了解用户组可以添加的DRS权限，并结合实际需求进行选择，DRS支持的系统权限，请参见：DRS系统权限。若您需要对除DRS之外的其它服务授权，IAM支持服务的所有权限请参见权限策略。

(12)

示例流程

图2-1 给用户授权 DRS 权限流程

1. 创建用户组并授权

在IAM控制台创建用户组，并授予数据复制服务管理员权限“DRS Administrator”权限。

2. 创建用户

在IAM控制台创建用户，并将其加入1中创建的用户组。

3. 用户登录并验证权限

新创建的用户登录控制台，切换至授权区域验证权限，操作如下：

在“服务列表”中选择数据复制服务，进入DRS主界面，单击右上角“创建迁移任务”，尝试创建迁移任务，如果可以创建迁移任务（假设当前权限仅包含

“DRS Administrator”），就表示“DRS Administrator”权限已生效。

2.2 DRS 自定义策略

如果系统预置的DRS权限，不满足您的授权要求，可以创建自定义策略。自定义策略中可以添加的授权项（Action）请参考数据复制服务授权项说明。

目前华为云支持以下两种方式创建自定义策略：

● 可视化视图创建自定义策略：无需了解策略语法，按可视化视图导航栏选择云服务、操作、资源、条件等策略内容，可自动生成策略。

● JSON视图创建自定义策略：可以在选择策略模板后，根据具体需求编辑策略内容；也可以直接在编辑框内编写JSON格式的策略内容。

具体创建步骤请参见：创建自定义策略。本章为您介绍常用的DRS自定义策略样例。

(13)

DRS 自定义策略样例

● 示例1：授权用户创建DRS实例 { "Version": "1.1",

"Statement": [{

"Action": ["drs:instance:create"], "Effect": "Allow"

}]

}

● 示例2：拒绝用户删除DRS实例

拒绝策略需要同时配合其他策略使用，否则没有实际作用。用户被授予的策略中，一个授权项的作用如果同时存在Allow和Deny，则遵循Deny优先。

如果您给用户授予DRS FullAccess的系统策略，但不希望用户拥有DRS FullAccess 中定义的删除DRS实例，您可以创建一条拒绝删除云服务的自定义策略，然后同时将DRS FullAccess和拒绝策略授予用户，根据Deny优先原则，则用户可以对 DRS实例执行除了删除DRS实例外的所有操作。拒绝策略示例如下：

{ "Version": "1.1", "Statement": [{

"Action": ["drs:instance:delete"], "Effect": "Deny"

}]

}

(14)

3 ^实时迁移

3.1 迁移用户

操作场景

数据库的迁移过程中，迁移用户需要进行单独处理。

MySQL 数据库操作

在MySQL迁移过程中，常见的迁移用户一般分为三类：可完整迁移的用户、需要降权的用户和不可迁移的用户。

● 可完整迁移的用户：可完整迁移的用户指满足目标数据库权限要求的用户，该类用户在进行迁移时不需要做任何处理，系统默认会将对应的数据库用户权限迁移至目标数据库。

● 需要降权处理的用户：需要降权的用户指具有不满足目标数据库权限要求的部分高权限的用户，比如具有：super、file、shutdown等高权限的用户。该类用户在进行迁移时需要进行降权处理，否则会导致迁移失败。

对于该类账号不支持的高权限，将会由DRS自动进行降权处理，您可以通过单击备注列的“查看”按钮查看具体的降权处理信息，依据该信息，可以帮助您评估降权是否对其业务程序造成相关影响。

● 不可迁移的用户：不可迁移的用户指由于某些原因，DRS不支持该类数据库用户的迁移。该类账号将在目标数据库中缺失，请先确保业务不受该类账号影响。同时，任务启动后，所有针对该类账号进行的权限密码操作，将会导致增量迁移失败。

您可以根据业务需求选择“迁移”或者“不迁移”这些用户，当您选择“迁移”数据库用户时，可以选择部分迁移，也可以选择全部迁移。可按照如下操作步骤进行数据库用户、权限和密码的处理，此处以勾选所有可以迁移的数据库用户为例。

迁移用户模块主要由账号名称、账号权限和账号密码三部分构成。

步骤1 一般账号名称的组成格式为：'账号名'+@+'host'，其中host表示具体允许访问源端数据库的目标库IP地址，您可以根据具体的业务场景选择是否需要修改账号的host地址，对目标库IP进行重规划。

(15)

host地址可在如下图所示的输入框中进行修改即可。源库为MySQL 8.0时，不建议修改host地址。

图3-1 修改 host 地址

步骤2 账号权限一般默认不可修改，对于支持迁移的账号（可完整迁移的用户和需要降权的用户），系统也将默认支持对应用户权限的迁移。

迁移成功后，存储在目标数据库中的对应用户（需要降权的用户）是经过降权处理的用户。

图3-2 账号权限

步骤3 DRS支持数据库用户密码的迁移。

数据库用户密码的迁移可通过如下两种方式来处理。

由于DRS在迁移时不会分析您的密码数据和强度，源系统密码复杂度过弱则存在安全风险，为了确保迁移过程中数据的安全性，您可以根据业务需求，选择是否需要重新设置数据库用户密码，通过设置较高的密码复杂度来持续保护数据库。

(16)

图3-3 密码迁移

您可以选择在迁移的过程中，直接迁移源数据库系统当前的密码，此时不需要通过勾选“重置密码”来设置新密码。数据库用户密码迁移至目标库后，您如果担心用户密码强度较弱，为了确保数据库的安全性，此时也可以选择在目标库端重新设置强度较高的源系统密码。

方式二：重置密码。

图3-4 重置密码

如上图所示，您可以通过勾选“重置密码”选择立即重新设置源系统密码后再继续进行用户密码迁移。

您可以选择某个指定支持迁移的用户，在“输入密码”列直接设置新密码或者选择所有支持迁移的用户，勾选右下角“统一输入密码”，批量将所选用户密码设置为相同的密码，以便快速完成迁移。使用批量方法设置的密码，待迁移成功后，可以在目标数据库端通过执行DDL语句，进行密码重置。

步骤4 对于需要降权处理的用户和不支持迁移的用户，在备注列的查看详情中会提示具体的原因，您需要单击对应用户备注列的“查看”，确认详情后才可进行下一步操作。如果存在多个需要查看备注详情的用户，您也可以单击“确认所有备注”按钮，一键查看备注信息。

(17)

图3-5 查看备注信息

数据库用户已存在是不支持迁移到目标数据库的常见情形，此时您可以根据实际情况，决定是否需要删除目标端已存在的数据库用户，并单击“刷新”按钮，刷新当前数据库迁移用户的分类。

说明

● 目前仅MySQL支持迁移用户功能。

● 以上重新设置的密码强度必须满足目标数据库的密码复杂度要求。

----结束

MongoDB 数据库操作

在MongoDB数据库迁移过程中，常见的迁移用户一般分为两类：可迁移的用户和不可迁移的用户。

您可以根据业务需求选择“迁移”或者“不迁移”这些用户，当您选择迁移数据库用户时，需要按照如下操作步骤进行数据库用户及角色的处理。

迁移用户模块主要由账号名称、账号角色两部分构成。

步骤1 对于可支持迁移的用户或者角色，您可以根据业务需求选择需要迁移的账号及角色。

如果所选迁移的账号依赖于某些角色，需要同时迁移该账号和所依赖的角色，否则会导致迁移失败。

(18)

图3-6 选择迁移用户

步骤2 对于不支持迁移的用户或者角色，在备注列的查看详情中会提示具体的原因，您需要单击对应用户备注列的“查看”，确认详情后才可进行下一步操作。如果存在多个需要查看备注详情的用户，您也可以单击“确认所有备注”按钮，一键查看备注信息。

图3-7 查看备注信息

----结束

3.2 参数对比列表

在进行数据库迁移时，为了确保迁移成功后业务应用的使用不受影响，数据复制服务提供了参数对比功能帮助您进行源库和目标库参数一致性对比。

本章节针对不同的引擎版本，列举了常见的常规参数及性能参数，方便您在使用参数对比功能时进行参考。

(19)

MySQL 5.6 版本

表3-1 MySQL5.6 参数列表

参数名称参数类型是否需要重启数据库

connect_timeout 常规参数否 event_scheduler 常规参数否 innodb_lock_wait_timeou

t 常规参数否

max_connections 常规参数否 net_read_timeout 常规参数否 net_write_timeout 常规参数否 explicit_defaults_for_time

stamp 常规参数是

innodb_flush_log_at_trx_

commit 常规参数否

max_allowed_packet 常规参数否 tx_isolation 常规参数否 character_set_client 常规参数否 character_set_connection 常规参数否 collation_connection 常规参数否 character_set_results 常规参数否 collation_server 常规参数否 binlog_cache_size 性能参数否 binlog_stmt_cache_size 性能参数否 bulk_insert_buffer_size 性能参数否 innodb_buffer_pool_size 性能参数是 key_buffer_size 性能参数否 long_query_time 性能参数否

(20)

MySQL 5.7 版本

t 常规参数否

stamp 常规参数否

max_allowed_packet 常规参数否 tx_isolation 常规参数否 character_set_client 常规参数否 character_set_connection 常规参数否 collation_connection 常规参数否 character_set_results 常规参数否 collation_server 常规参数否 binlog_cache_size 性能参数否 binlog_stmt_cache_size 性能参数否 bulk_insert_buffer_size 性能参数否 innodb_buffer_pool_size 性能参数否 key_buffer_size 性能参数否 long_query_time 性能参数否 query_cache_type 性能参数否 read_buffer_size 性能参数否 read_rnd_buffer_size 性能参数否

(21)

参数名称参数类型是否需要重启数据库 sort_buffer_size 性能参数否

sync_binlog 性能参数否

MySQL 8.0 版本

t 常规参数否

stamp 常规参数否

max_allowed_packet 常规参数否 tx_isolation 常规参数否 character_set_client 常规参数否 character_set_connection 常规参数否 collation_connection 常规参数否 character_set_results 常规参数否 collation_server 常规参数否 binlog_cache_size 性能参数否

(22)

参数名称参数类型是否需要重启数据库 query_cache_type 性能参数否

read_buffer_size 性能参数否 read_rnd_buffer_size 性能参数否 sort_buffer_size 性能参数否

sync_binlog 性能参数否

说明

● 目前仅MySQL数据库迁移支持参数对比的功能。

● 对于上述参数“innodb_buffer_pool_size”，参数对比功能对应用到目标数据库的值做了内控，最大不会超过目标数据库总内存的70%。所以有时候是无法完全和源数据库该参数取值一致，这是为了避免目标数据库设置过大，而导致数据库无法启动，如果您觉得上述最大值偏小，可以在数据库中通过执行命令手动设置更大的值。

3.3 常见场景的迁移任务配置

3.3.1 创建 VPN、专线网络迁移任务

本章节将以MySQL到RDS for MySQL的迁移为示例，介绍在VPN或专线网络场景下，

通过数据复制服务管理控制台配置数据迁移任务的流程，其他存储引擎的配置流程类似。

VPN、专线网络适合通过VPN网络或专线网络，实现其他云下自建数据库与云上数据库迁移、或云上跨Region的数据库之间的迁移。

在数据复制服务中，数据库迁移是通过任务的形式完成的，通过创建任务向导，可以完成任务信息配置、任务创建。迁移任务创建成功后，您也可以通过数据复制服务管理控制台，对任务进行管理。

前提条件

● 已登录数据复制服务控制台。

● 账户余额大于等于0元。

● 参见实时迁移。

● 参见使用须知。

操作步骤

步骤1 在“实时迁移管理”页面，单击“创建迁移任务”，进入创建迁移任务页面。

步骤2 在“迁移实例”页面，填选区域、任务名称、任务异常通知设置、SMN主题、时延阈值、任务异常自动结束时间、描述、迁移实例信息，单击“下一步”。

(23)

图3-8 迁移任务信息

表3-4 任务和描述

参数描述

区域当前所在区域，可进行切换。

任务名称任务名称在4-50位之间，必须以字母开头，不区分大小写，可以包含字母、数字、中划线或下划线，不能包含其他的特殊字符。

任务异常通知设置

该项为可选参数，开启之后，选择对应的SMN主题。当迁移任务状态异常时，系统将发送通知。

SMN主题 “任务异常通知设置”项开启后可见，需提前在SMN上申请主题并添加订阅。

SMN主题申请和订阅可参考《消息通知服务用户指南》。

时延阈值在增量迁移阶段，源数据库和目标数据库之间的实时同步有时会存在一个时间差，称为时延，单位为秒。

时延阈值设置是指时延超过一定的值后（时延阈值范围为1—

3600s），DRS可以发送告警通知。告警通知将在时延稳定超过设定的阈值6min后发送，避免出现由于时延波动反复发送告警通知的情况。

说明

(24)

参数描述

描述描述不能超过256位，且不能包含! = < > & ' " \ 特殊字符。

图3-9 迁移实例信息

表3-5 迁移实例信息

参数描述

数据流动方向选择入云。

入云指目标端数据库为本云关系型数据库。

源数据库引擎选择MySQL。

目标数据库引擎选择MySQL。

网络类型选择VPN、专线网络。

默认为公网网络类型，可支持选择VPC网络、VPN、专线网络、公网网络。

● VPC网络：适合云上数据库之间的迁移。

● 公网网络：适合通过公网网络把其他云下或其他平台的数据库迁移到目标数据库，该类型要求目标数据库绑定弹性公网 IP（EIP）。

● VPN网络：适合通过VPN网络，实现其他云下自建数据库与云上数据库迁移、或云上跨Region的数据库之间的迁移。

● 专线网络：适合通过专线网络，实现其他云下自建数据库与云上数据库迁移、或云上跨Region的数据库之间的迁移。

目标数据库实例用户所创建的目标数据库实例。

(25)

参数描述迁移实例所在子

网

选择迁移实例所在的子网。也可以单击“查看子网”，跳转至

“网络控制台”查看实例所在子网帮助选择。

默认值为当前所选数据库实例所在子网，请选择有可用IP地址的子网。为确保迁移实例创建成功，仅显示已经开启DHCP的子网。

目标库读写设置 ● 只读

迁移中，目标数据库将转化为只读、不可写入的状态，迁移任务结束后恢复可读写状态，此选项可有效的确保数据迁移的完整性和成功率，推荐此选项。

● 读写

迁移中，目标数据库可以读写，但需要避免操作或接入应用后会更改迁移中的数据（注意：无业务的程序常常也有微量的数据操作），进而形成数据冲突、任务故障、且无法修复续传，充分了解要点后可选择此选项。

迁移模式 ● 全量：该模式为数据库一次性迁移，适用于可中断业务的数据库迁移场景，全量迁移将非系统数据库的全部数据库对象和数据一次性迁移至目标端数据库，包括：表、视图、存储过程等。

说明

如果用户只进行全量迁移时，建议停止对源数据库的操作，否则迁移过程中源数据库产生的新数据不会同步到目标数据库。

● 全量+增量：该模式为数据库持续性迁移，适用于对业务中断敏感的场景，通过全量迁移过程中完成的目标端数据库的初始化后，增量迁移阶段通过解析日志等技术，将源端和目标端数据库保持数据持续一致。

说明选择“全量+增量”迁移模式，增量迁移可以在全量迁移完成的基础上实现数据的持续同步，无需中断业务，实现迁移过程中源业务和数据库继续对外提供访问。

企业项目对于已成功关联企业项目的用户，仅需在“企业项目”下拉框中选择目标项目。

如果需要自定义企业项目，请前往项目管理服务进行创建。关于如何创建项目，详见《项目管理用户指南》。

标签可选配置，对迁移任务的标识。使用标签可方便管理您的迁移任务。每个任务最多支持10个标签配额。

任务创建成功后，您可以单击实例名称，在“标签”页签下查看对应标签。关于标签的详细操作，请参见标签管理。

(26)

图3-10 源库信息页面

表3-6 源库信息

参数描述

IP地址或域名源数据库的IP地址或域名。

端口源数据库服务端口，可输入范围为1~65535间的整数。

数据库用户名源数据库的用户名。

数据库密码源数据库的用户名所对应的密码。

SSL安全连接通过该功能，用户可以选择是否开启对迁移链路的加密。如果开启该功能，需要用户上传SSL CA根证书。

说明

– 最大支持上传500KB的证书文件。

– 如果不使用SSL证书，请自行承担数据安全风险。

说明

源数据库的IP地址、端口、用户名和密码将在迁移过程中被加密暂存到数据库和迁移实例主机上，待该任务删除后会永久清除。

● 目标库信息配置

(27)

图3-11 目标库信息

表3-7 目标库信息

参数描述

数据库实例名称默认为创建迁移任务时选择的关系型数据库实例，不可进行修改。

数据库用户名目标数据库对应的数据库用户名。

数据库密码目标数据库的登录密码。

所有Definer迁移到该用户下

– 是迁移后，所有源数据库对象的Definer都会迁移至该用户下，其他用户需要授权后才具有数据库对象权限，如何授权请参考MySQL迁移中Definer强制转化后如何维持原业务用户权限体系

– 否迁移后，将保持源数据库对象Definer定义不变，选择此选项，需要配合下一步用户权限迁移功能，将源数据库的用户全部迁移，这样才能保持源数据库的权限体系完全不变。

说明

目标数据库用户名和密码将在迁移过程中被加密暂存到数据库和迁移实例主机上，待该任

(28)

图3-12 迁移模式

(29)

表3-8 迁移模式和迁移对象

参数描述

流速模式流速模式支持限速和不限速，默认为不限速。

● 限速

自定义的最大迁移速度，迁移过程中的迁移速度将不会超过该速度。

当流速模式选择了“限速”时，你需要通过流速设置来定时控制迁移速度。流速设置通常包括限速时间段和流速大小的设置。默认的限速时间段为全天限流，您也可以根据业务需求自定义时段限流。

自定义的时段限流支持最多设置3个定时任务，每个定时任务之间不能存在交叉的时间段，未设定在限速时间段的时间默认为不限速。

流速的大小需要根据业务场景来设置，不能超过9999MB/s。

图3-13 设置流速模式

● 不限速

对迁移速度不进行限制，通常会最大化使用源数据库的出口带宽。

该流速模式同时会对源数据库造成读消耗，消耗取决于源数据库的出口带宽。比如源数据库的出口带宽为100MB/s，假设高速模式使用了80%带宽，则迁移对源数据库将造成80MB/s的读操作IO消耗。

说明

– 限速模式只对全量迁移阶段生效，增量迁移阶段不生效。

– 您也可以在创建任务后修改流速模式。具体方法请参见修改流速模式。

(30)

参数描述

快照模式如果您选择的是全量迁移模式的任务，数据复制服务支持设置快照模式。

● 非快照式

适用于停止业务数据写入的导出，如果全量迁移中仍然有业务数据的修改，则导出数据为时间点非水平一致。稳定性和性能要优于快照式全量迁移。

● 快照式

可以在业务运行时产生一份时间水平一致的快照数据，具有业务数据分析价值，过程中的数据变化不会体现在导出数据中。

说明

– 快照读会使用MySQL备份锁进行全局锁表，在开启一致性读后自动解锁

（加锁时间在3s以内），备份锁会对此期间的DML或者DDL操作造成阻塞，建议用户选择源库空闲的时间段使用快照备份功能。

– 目前仅MySQL全量模式的迁移任务支持快照模式设置。

– 在快照迁移时不允许执行DDL操作，否则会导致全量迁移失败。

迁移用户数据库的迁移过程中，迁移用户需要进行单独处理。

常见的迁移用户一般分为三类：可完整迁移的用户、需要降权的用户和不可迁移的用户。您可以根据业务需求选择“迁移”或者“不迁移”，选择“迁移”后，可根据需要选择迁移用户。

● 迁移

当您选择迁移用户时，请参见《数据复制服务用户指南》中“迁移用户”章节进行数据库用户、权限及密码的处理。

● 不迁移

迁移过程中，将不进行数据库用户、权限和密码的迁移。

迁移对象您可以根据业务需求，选择全部对象迁移、表级迁移或者库级迁移。

● 全部迁移：将源数据库中的所有对象全部迁移至目标数据库，对象迁移到目标数据库实例后，对象名将会保持与源数据库实例对象名一致且无法修改。

● 表级迁移：将选择的表级对象迁移至目标数据库。

● 库级迁移：将选择的库级对象迁移至目标数据库。

如果有切换源数据库的操作或源库迁移对象变化的情况，请务必在选择迁移对象前单击右上角的，以确保待选择的对象为最新源数据库对象。

说明

● 若选择部分数据库进行迁移时，由于存储过程、视图等对象可能与其他数据库的表存在依赖关系，若所依赖的表未迁移，则会导致迁移失败。建议您在迁移之前进行确认，或选择全部数据库进行迁移。

● 选择对象的时候，对象名称的前后空格不显示，中间如有多个空格只显示一个空格。

● 选择对象的时候支持搜索，以便您快速选择需要的数据库对象。

步骤5 在“预检查”页面，进行迁移任务预校验，校验是否可进行迁移。

● 查看检查结果，如有不通过的检查项，需要修复不通过项后，单击“重新校验”

按钮重新进行迁移任务预校验。

(31)

预检查不通过项处理建议请参见《数据复制服务用户指南》中的“预检查不通过项修复方法”。

图3-14 预检查

● 预检查完成后，且预检查通过率为100%时，单击“下一步”。

说明

所有检查项结果均通过时，若存在待确认项，需要阅读并确认详情后才可以继续执行下一步操作。

步骤6 进入“参数对比”页面，进行参数对比。

参数对比功能从常规参数和性能参数两个维度，展示了源数据库和目标数据库的参数值是否一致。您可以根据业务需求，决定是否选用该功能。该操作不影响数据的迁移，主要目的是为了确保迁移成功后业务应用的使用不受影响。

● 若您选择不进行参数对比，可跳过该步骤，单击页面右下角“下一步”按钮，继续执行后续操作。

● 若您选择进行参数对比，请参照如下的步骤操作。

一般情况下，对于常规参数，如果源库和目标库存在不一致的情况，建议将目标数据库的参数值通过“一键修改”按钮修改为和源库对应参数相同的值。

(32)

图3-15 修改常规参数

对于性能参数，您可以根据业务场景，自定义源数据库和目标库的参数值，二者结果可以一致也可以不一致。

– 若您需要将对比结果一致的性能参数修改为不一致，需要在“目标库值调整为”一列手动输入结果，单击左上角“一键修改”按钮，即可将源数据库和目标数据库对应的性能参数值改为不一致。

– 若您想将对比结果不一致的参数改为一致结果，请参考如下流程进行修改：

i. 对齐源库和目标库的参数值。

当源库和目标库对应的参数值出现不一致时，选择需要修改的参数，单击“一键对齐”按钮，系统将帮您自动填充目标数据库的参数值，使其和源库对应的参数值保持一致。

图3-16 一键对齐参数

说明

对齐参数值的操作，您也可以通过手动输入结果。

ii. 修改参数值。

(33)

源库和目标库的不一致参数值对齐后，单击“一键修改”按钮，系统将按照您当前设置的目标库参数值进行修改。修改完成后，目标库的参数值和对比结果会自动进行更新。

图3-17 修改性能参数

部分参数修改后无法在目标数据库立即生效，需要重启才能生效，此时的对比结果显示为“待重启，不一致”。建议您在迁移任务启动之前重启目标数据库，或者迁移结束后选择一个计划时间重启。如果您选择迁移结束后重启目标数据库，请合理设置重启计划时间，避免参数生效太晚影响业务的正常使用。

在进行参数对比功能时，您可以参见《数据复制服务用户指南》中“参数对比列表”进行参数设置。

iii. 参数对比操作完成后，单击“下一步”。

步骤7 在“任务确认”页面，设置迁移任务的启动时间，并确认迁移任务信息无误后，单击

“启动任务”，提交迁移任务。

迁移任务的启动时间可以根据业务需求，设置为“立即启动”或“稍后启动”。

预计迁移任务启动后，会对源数据库和目标数据库的性能产生影响，建议选择业务低峰期，合理设置迁移任务的启动时间。

步骤8 迁移任务提交后，您可在“实时迁移管理”页面，查看并管理自己的任务。

● 您可查看任务提交后的状态，状态请参见任务状态。

● 在任务列表的右上角，单击刷新列表，可查看到最新的任务状态。

----结束

(34)

前提条件

操作步骤

参数描述

任务异常通

知设置该项为可选参数，开启之后，选择对应的SMN主题。当迁移任务状态异常时，系统将发送通知。

(35)

参数描述

说明

● 首次进入增量迁移阶段，会有较多数据等待同步，存在较大的时延，属于正常情况，不在此功能的监控范围之内。

● 设置时延阈值之前，需要设置任务异常通知。

任务异常自动结束时间

（天）

设置任务异常自动结束天数，输入值必须在14-100之间。

说明

异常状态下的任务仍然会计费，而长时间异常的任务无法续传和恢复。设置任务异常自动结束天数后，异常且超时的任务将会自动结束，以免产生不必要的费用。

(36)

参数描述

目标数据库引擎选择MySQL。

网络类型此处选择VPC网络。

默认为公网网络类型，可按照需求选择VPC网络、VPN网络、

专线网络、公网网络。

迁移实例所在子网

目标库读写设置 ● 只读

迁移中，目标数据库将转化为只读、不可写入的状态，迁移任务结束后恢复可读写状态，此选项可有效的确保数据迁移的完整性和成功率，推荐此选项。

● 读写

迁移中，目标数据库可以读写，但需要避免操作或接入应用后会更改迁移中的数据（注意：无业务的程序常常也有微量的数据操作），进而形成数据冲突、任务故障、且无法修复续传，充分了解要点后可选择此选项。

迁移模式 ● 全量：该模式为数据库一次性迁移，适用于可中断业务的数据库迁移场景，全量迁移将非系统数据库的全部数据库对象和数据一次性迁移至目标端数据库，包括：表、视图、存储过程等。

说明

(37)

参数描述

步骤3 在“源库及目标库”页面，迁移实例创建成功后，填选源库信息和目标库信息，建议您单击“源库和目标库”处的“测试连接”，分别测试并确定与源库和目标库连通后，勾选协议，单击“下一步”。

说明

此处源库类型分为ECS自建库和RDS实例，需要根据源数据库的实际来源选择相应的分类。两种场景下的参数配置不一样，需要根据具体场景进行配置。

● 场景一：ECS自建库源库信息配置图3-20 ECS 自建库场景源库信息

(38)

参数描述

VPC 源数据库实例所在的虚拟专用网络，可以对不同业务进行网络隔离。您需要创建或选择所需的虚拟私有云。如何创建虚拟私有云，请参见《虚拟私有云用户指南》中的“创建虚拟私有云基本信息及默认子网”。

子网通过子网提供与其他网络隔离的、可以独享的网络资源，以提高网络安全。子网在可用分区内才会有效，创建源数据库实例的子网需要开启DHCP功能，在创建过程中也不能关闭已选子网的DHCP功能。

IP地址或域名源数据库的IP地址或域名。

端口源数据库服务端口，可输入范围为1~65535间的整数。

数据库用户名源数据库的用户名。

SSL安全连接通过该功能，用户可以选择是否开启对迁移链路的加密。如果开启该功能，需要用户上传SSL CA根证书。

说明

– 最大支持上传500KB的证书文件。

– 如果不使用SSL证书，请自行承担数据安全风险。

说明

源数据库的IP地址或域名、数据库用户名和密码，会被系统加密暂存，直至删除该迁移任务后自动清除。

● 场景二：RDS实例源库信息配置

图3-21 RDS 实例场景源库信息

表3-12 RDS 实例场景源库信息

参数描述

源库类型选择RDS实例。

(39)

参数描述

数据库实例名称选择待迁移的关系型数据库实例作为源数据库实例。

数据库用户名源数据库实例的用户名。

● 目标库信息配置

图3-22 目标库信息

表3-13 目标库信息

参数描述

数据库实例名称默认为创建迁移任务时选择的关系型数据库实例，不可进行修改。

数据库用户名目标数据库对应的数据库用户名。

数据库密码目标数据库的登录密码。

所有Definer迁

移到该用户下 – 是

迁移后，所有源数据库对象的Definer都会迁移至该用户下，其他用户需要授权后才具有数据库对象权限，如何授权请参考MySQL迁移中Definer强制转化后如何维持原业务用户权限体系

– 否

(40)

步骤4 在“迁移设置”页面，设置迁移用户和迁移对象，单击“下一步”。

图3-23 迁移模式

(41)

表3-14 迁移模式和迁移对象

参数描述

流速模式流速模式支持限速和不限速，默认为不限速。

● 限速

自定义的最大迁移速度，迁移过程中的迁移速度将不会超过该速度。

当流速模式选择了“限速”时，你需要通过流速设置来定时控制迁移速度。流速设置通常包括限速时间段和流速大小的设置。默认的限速时间段为全天限流，您也可以根据业务需求自定义时段限流。

自定义的时段限流支持最多设置3个定时任务，每个定时任务之间不能存在交叉的时间段，未设定在限速时间段的时间默认为不限速。

流速的大小需要根据业务场景来设置，不能超过9999MB/s。

图3-24 设置流速模式

● 不限速

对迁移速度不进行限制，通常会最大化使用源数据库的出口带宽。

该流速模式同时会对源数据库造成读消耗，消耗取决于源数据库的出口带宽。比如源数据库的出口带宽为100MB/s，假设高速模式使用了80%带宽，则迁移对源数据库将造成80MB/s的读操作IO消耗。

说明

– 限速模式只对全量迁移阶段生效，增量迁移阶段不生效。

– 您也可以在创建任务后修改流速模式。具体方法请参见修改流速模式。

(42)

参数描述

快照模式如果您选择的是全量迁移模式的任务，数据复制服务支持设置快照模式。

● 非快照式

适用于停止业务数据写入的导出，如果全量迁移中仍然有业务数据的修改，则导出数据为时间点非水平一致。稳定性和性能要优于快照式全量迁移。

● 快照式

可以在业务运行时产生一份时间水平一致的快照数据，具有业务数据分析价值，过程中的数据变化不会体现在导出数据中。

说明

– 快照读会使用MySQL备份锁进行全局锁表，在开启一致性读后自动解锁

（加锁时间在3s以内），备份锁会对此期间的DML或者DDL操作造成阻塞，建议用户选择源库空闲的时间段使用快照备份功能。

– 目前仅MySQL全量模式的迁移任务支持快照模式设置。

– 在快照迁移时不允许执行DDL操作，否则会导致全量迁移失败。

迁移用户数据库的迁移过程中，迁移用户需要进行单独处理。

常见的迁移用户一般分为三类：可完整迁移的用户、需要降权的用户和不可迁移的用户。您可以根据业务需求选择“迁移”或者“不迁移”，选择“迁移”后，可根据需要选择迁移用户。

● 迁移

当您选择迁移用户时，请参见《数据复制服务用户指南》中“迁移用户”章节进行数据库用户、权限及密码的处理。

● 不迁移

迁移过程中，将不进行数据库用户、权限和密码的迁移。

迁移对象您可以根据业务需求，选择全部对象迁移、表级迁移或者库级迁移。

● 全部迁移：将源数据库中的所有对象全部迁移至目标数据库，对象迁移到目标数据库实例后，对象名将会保持与源数据库实例对象名一致且无法修改。

● 表级迁移：将选择的表级对象迁移至目标数据库。

● 库级迁移：将选择的库级对象迁移至目标数据库。

如果有切换源数据库的操作或源库迁移对象变化的情况，请务必在选择迁移对象前单击右上角的，以确保待选择的对象为最新源数据库对象。

说明

● 若选择部分数据库进行迁移时，由于存储过程、视图等对象可能与其他数据库的表存在依赖关系，若所依赖的表未迁移，则会导致迁移失败。建议您在迁移之前进行确认，或选择全部数据库进行迁移。

● 选择对象的时候，对象名称的前后空格不显示，中间如有多个空格只显示一个空格。

● 选择对象的时候支持搜索，以便您快速选择需要的数据库对象。

步骤5 在“预检查”页面，进行迁移任务预校验，校验是否可进行迁移。

● 查看检查结果，如有不通过的检查项，需要修复不通过项后，单击“重新校验”

按钮重新进行迁移任务预校验。

(43)

预检查不通过项处理建议请参见《数据复制服务用户指南》中的“预检查不通过项修复方法”。

图3-25 预检查

● 预检查完成后，且预检查通过率为100%时，单击“下一步”。

说明

所有检查项结果均通过时，若存在待确认项，需要阅读并确认详情后才可以继续执行下一步操作。

步骤6 进入“参数对比”页面，进行参数对比。

参数对比功能从常规参数和性能参数两个维度，展示了源数据库和目标数据库的参数值是否一致。您可以根据业务需求，决定是否选用该功能。该操作不影响数据的迁移，主要目的是为了确保迁移成功后业务应用的使用不受影响。

● 若您选择不进行参数对比，可跳过该步骤，单击页面右下角“下一步”按钮，继续执行后续操作。

● 若您选择进行参数对比，请参照如下的步骤操作。

一般情况下，对于常规参数，如果源库和目标库存在不一致的情况，建议将目标数据库的参数值通过“一键修改”按钮修改为和源库对应参数相同的值。

(44)

图3-26 修改常规参数

对于性能参数，您可以根据业务场景，自定义源数据库和目标库的参数值，二者结果可以一致也可以不一致。

– 若您需要将对比结果一致的性能参数修改为不一致，需要在“目标库值调整为”一列手动输入结果，单击左上角“一键修改”按钮，即可将源数据库和目标数据库对应的性能参数值改为不一致。

– 若您想将对比结果不一致的参数改为一致结果，请参考如下流程进行修改：

i. 对齐源库和目标库的参数值。

当源库和目标库对应的参数值出现不一致时，选择需要修改的参数，单击“一键对齐”按钮，系统将帮您自动填充目标数据库的参数值，使其和源库对应的参数值保持一致。

图3-27 一键对齐参数

说明

对齐参数值的操作，您也可以通过手动输入结果。

ii. 修改参数值。

(45)

源库和目标库的不一致参数值对齐后，单击“一键修改”按钮，系统将按照您当前设置的目标库参数值进行修改。修改完成后，目标库的参数值和对比结果会自动进行更新。

图3-28 修改性能参数

部分参数修改后无法在目标数据库立即生效，需要重启才能生效，此时的对比结果显示为“待重启，不一致”。建议您在迁移任务启动之前重启目标数据库，或者迁移结束后选择一个计划时间重启。如果您选择迁移结束后重启目标数据库，请合理设置重启计划时间，避免参数生效太晚影响业务的正常使用。

在进行参数对比功能时，您可以参见《数据复制服务用户指南》中“参数对比列表”进行参数设置。

iii. 参数对比操作完成后，单击“下一步”。

步骤7 在“任务确认”页面，设置迁移任务的启动时间，并确认迁移任务信息无误后，单击

“启动任务”，提交迁移任务。

迁移任务的启动时间可以根据业务需求，设置为“立即启动”或“稍后启动”。

预计迁移任务启动后，会对源数据库和目标数据库的性能产生影响，建议选择业务低峰期，合理设置迁移任务的启动时间。

步骤8 迁移任务提交后，您可在“实时迁移管理”页面，查看并管理自己的任务。

● 您可查看任务提交后的状态，状态请参见任务状态。

● 在任务列表的右上角，单击刷新列表，可查看到最新的任务状态。

----结束

(46)

前提条件

操作步骤

参数描述

任务异常通

知设置该项为可选参数，开启之后，选择对应的SMN主题。当迁移任务状态异常时，系统将发送通知。

(47)

参数描述

说明

● 首次进入增量迁移阶段，会有较多数据等待同步，存在较大的时延，属于正常情况，不在此功能的监控范围之内。

● 设置时延阈值之前，需要设置任务异常通知。

任务异常自动结束时间

（天）

设置任务异常自动结束天数，输入值必须在14-100之间。

说明

异常状态下的任务仍然会计费，而长时间异常的任务无法续传和恢复。设置任务异常自动结束天数后，异常且超时的任务将会自动结束，以免产生不必要的费用。

(48)

参数描述目标数据库引擎选择DDS。

网络类型默认为公网网络类型，可按照需求选择VPC网络、VPN网络、

专线网络、公网网络。

说明分片集群的全量+增量迁移目前不支持选择VPC网络。

迁移实例所在子网

迁移模式 ● 全量：该模式为数据库一次性迁移，适用于可中断业务的数据库迁移场景，全量迁移将非系统数据库的全部数据库对象和数据一次性迁移至目标端数据库，包括：集合、索引等。

说明

源数据库实例类型

需要根据源数据库的具体来源进行设置。

● 当源库类型属于集群时，该项需要设置为集群

● 当源库类型属于副本集或者单节点时，该项需要设置为非集群。

● 当源库类型为MongDB集群4.0及以上版本，集群实例无法获取到分片节点的IP时，可选择集群(MongoDB 4.0+)。

源端分片个数当源端实例类型设置为“集群”时，需要填写源端数据库实例个数。

源端数据库实例个数默认最小值为2，最大值为32，你需要根据源库实际的集群分片个数设置该值大小。

(49)

参数描述

步骤3 在“源库及目标库”页面，迁移实例创建成功后，填选源库信息和目标库信息，建议您单击“源库和目标库”处的“测试连接”，分别测试并确定与源库和目标库连通后，勾选协议，单击“下一步”。

图3-31 源库信息页面

表3-17 源库信息

参数描述

mongosIP地址或

域名源数据库的IP地址或域名，格式为IP地址/域名:端口。其中源数据库服务端口，可输入范围为1~65534间的整数。

该输入框最多支持填写3组源数据库的IP地址或者域名信息，多个值需要使用英文逗号隔开。例如：

192.168.0.1:8080,192.168.0.2:8080。同时需要确保所填写的多个IP地址或域名属于同一个分片集群。

说明此处若填写的是多组IP地址或者域名信息，在进行测试连接的过程中，

入门_数据复制服务 DRS_用户指南_华为云

用户指南

华为技术有限公司

目录

1 入门...1

2 权限管理...2

3 实时迁移...5

5 实时同步...79

6 数据订阅... 351

8 对接云监控服务...381

9 对接云审计服务...388

10 预检查不通过项修复方法... 390

11 故障排除... 476

A 修订记录... 479

1 ^入门

2 ^权限管理

2.1 创建用户并授权使用 DRS

前提条件

示例流程

2.2 DRS 自定义策略

DRS 自定义策略样例

3 ^实时迁移

3.1 迁移用户

操作场景

MySQL 数据库操作

MongoDB 数据库操作

3.2 参数对比列表

MySQL 5.6 版本

MySQL 5.7 版本

MySQL 8.0 版本

3.3 常见场景的迁移任务配置

3.3.1 创建 VPN、专线网络迁移任务

前提条件

操作步骤

前提条件

操作步骤

前提条件

操作步骤

入门_数据复制服务 DRS_用户指南_华为云

用户指南

华为技术有限公司

目 录

1 入门...1

2 权限管理...2

3 实时迁移...5

5 实时同步...79

6 数据订阅... 351

8 对接云监控服务...381

9 对接云审计服务...388

10 预检查不通过项修复方法... 390

11 故障排除... 476

A 修订记录... 479

1 入门

2 权限管理

2.1 创建用户并授权使用 DRS

前提条件

示例流程

2.2 DRS 自定义策略

DRS 自定义策略样例

3 实时迁移

3.1 迁移用户

操作场景

MySQL 数据库操作

MongoDB 数据库操作

3.2 参数对比列表

MySQL 5.6 版本

MySQL 5.7 版本

MySQL 8.0 版本

3.3 常见场景的迁移任务配置

3.3.1 创建 VPN、专线网络迁移任务

前提条件

操作步骤

前提条件

操作步骤

前提条件

操作步骤

目录

1 ^入门

2 ^权限管理

3 ^实时迁移