本文重点介绍使用DMP的DTS工具对Oracle数据库进行全量加增量的数据迁移方式，也是目前较为推荐的Oracle迁移方式。它利用Oracle官方提供的RMAN技术，通过与数据库内部组件的紧密协作，实现数据的高效迁移。

       迁移支持版本：

       Oracle Database 11g release 2 (11.2.0.2) or later

       Oracle Database 12c（支持CDB）

       Oracle Database 19c（支持CDB）

       迁移架构支持：

       Oracle单实例 → Oracle单实例

       Oracle单实例 → OracleRAC

       Oracle RAC → Oracle RAC

       Oracle RAC → Oracle 单实例

DTS迁移技术原理

       RMAN（Recovery Manager）是Oracle数据库提供的备份和恢复工具，它可以帮助数据库管理员实现数据库备份和恢复操作，完成Oracle数据库的全量加增量迁移。RMAN的原理是基于Oracle数据库的架构和内部机制，它可以通过与数据库内部组件的交互来实现备份和恢复操作。RMAN的备份和恢复原理如下：

• RMAN通过Oracle数据库的控制文件和数据文件，获得数据库的结构和状态信息。

• RMAN通过Oracle数据库的恢复目录，获得备份集和备份策略的信息。

• RMAN通过Oracle数据库的恢复目录和控制文件，获得恢复需求和恢复策略。

• RMAN通过Oracle数据库的恢复目录和控制文件，生成备份集和备份信息。

• RMAN通过Oracle数据库的恢复目录和控制文件，执行恢复操作。

_{DTS迁移能力示意图}

       深信服DTS数据迁移工具，通过自动化和标准化的数据迁移策略，大幅度降低操作难度并提升迁移效率。该工具通过直观的可视化界面，为用户提供了一站式服务，包括目标数据库的构建、迁移前的详尽检查、实时监控迁移过程以及高效切换控制。这种集成化的方法不仅简化了数据库的创建和性能优化，还确保了用户能够精确掌握并优化整个迁移流程，以适应企业对数据库迁移的复杂和多变需求。

_{DTS迁移技术架构图}

       在迁移过程中，DTS扮演NFS服务器的角色，将数据盘通过网络进行共享。源数据库和目标数据库分别将NFS共享目录挂载到本地文件系统，源端通过RMAN完成数据库的备份任务，并将备份数据存储于NFS共享目录。随后，目标端从NFS共享目录中提取数据，执行RMAN恢复操作，以完成数据迁移过程。完整的迁移过程如下：

• DTS-VM虚拟机将自身数据盘格式化为NFS文件系统

• 在源数据库和目标端数据库挂载DTS-VM提供的NFS目录

• DTS通过SSH通道对源数据库进行RMAN全量备份

• DTS通过SSH通道在目标端数据库RESTORE全量备份

• 定时/手动对源数据库进行RMAN增量备份

• 在目标端数据库RESTORE增量备份

• 来到切换时间段，停止源端业务系统，确保不会有数据写入

• 在DMP界面手动进行数据库切换，可选择是否关闭源库

• 进行最后的增量备份数据传输和恢复动作，完成后目标端自动开机

• 目标端数据库开机成功后进行数据验证与业务验证

DTS迁移注意事项

• 在进行RMAN数据迁移的过程中，必须确保源数据库与目标数据库实例名的一致性。若两者名称不一致，可能会导致迁移过程中出现兼容性问题。因此，在新建目标数据库时，必须确认其实例名与源数据库相匹配。DMP平台会对此进行检查，并在发现不一致时，提供错误提示和修改措施。

• 为确保数据迁移流程的顺畅执行，必须在源数据库端采取一系列关键的预备措施：启用归档日志功能，这有助于跟踪数据库的变更历史，确保数据的可恢复性；开启强制日志功能，保证数据的完整性和一致性；此外，还需开启SSH服务实现远程连接，安装NFS客户端实现数据中转。

• 在进行数据迁移时，需要采用NFS协议进行备份及数据中转。需要确保源数据库、DTS-VM以及目标数据库之间的网络通信畅通无阻，特别是端口2049和111，必须保持可访问状态。在迁移操作前，建议暂时解除所有端口的访问限制策略，以避免影响迁移传输。

• 在执行首次全量数据迁移的过程中，为保证迁移数据的一致性和完整性，RMAN对源数据库的表空间、数据文件、临时文件以及PDB实施了严格的操作限制，禁止在迁移期间进行创建或删除。如果确实需要执行这些操作，请在迁移任务启动之前完成。
• 在数据库迁移的过程中，源数据库和目标数据库的服务IP地址是不同的。在业务切换阶段，必须考虑到数据库访问客户端可能需要进行相应的访问变更。如果客户端的变更成本较高，建议在数据库切换完成后，再对目标数据库进行IP地址的修改。这包括停止源端数据库的服务并将其下线，然后将目标端数据库的IP地址更新为与源端相同的地址，确保客户端可以正常访问业务数据库。
• 在Oracle数据库12.1C的CDB模式下，将RAC迁移至单机环境时，可能会遇到目标端无法成功还原的现象。这是由Oracle的一个已知BUG（编号19503821）引起的。在进行此类迁移操作时，需要特别注意此问题，并根据Oracle官方提供的解决方案或补丁来规避或解决这一BUG带来的影响。

迁移过程及注意事项

 迁移时间评估

 数据库配置规划

       核心业务系统数据库在迁移至深信服云计算平台时，可能存在CPU和内存配置紧张，或资源过剩的情况，需要对原服务器进行配置变更评估。评估原则如下：

• 深信服平台物理主频建议要高于原服务器或者保持持平且不低于2.0GHhz，禁止云平台的性能低于原操作系统的主频。

• 合理的CPU和内存平均利用率在30%-70%之间，业务高峰时也应保持在80%以内，当原VMware平台使用率超过70%时，考虑在深信服主机增加配置。

• 单实例数据库服务器配置建议16C-32C，如果32C还不能满足业务需求，建议优化数据库，排查慢SQL语句；或更改数据库架构为集群架构，不建议再通过增加服务器配置来承载业务。

• Oracle RAC集群服务器建议配置16C-32C，如果32C还不能满足业务需求，建议优化数据库，排查慢SQL语句；或为集群增加新的节点，以承载更多的业务访问，不建议再通过增加服务器配置来承载业务。

• 数据库内存配置建议在16G-64G的区间，具体配置需要通过专业的DBA进行计算，迁移时不可随意更改数据库服务器内存配置。

• 源端数据库的磁盘使用率不高于70%的情况下，迁移过来后可保持原状。如果源端磁盘使用率高于70%，在扩容时需考虑到未来3-5年的业务增量进行测算。

• 单实例数据库创建完成后只能修改数据盘/日志盘的大小，不能扩容数量。例如源数据库配置了4块1T磁盘，后面扩盘时只能扩大小，例如扩容到4块2T磁盘。

• Oracle RAC集群服务，只能增加数据盘/日志盘的数量，不建议扩容大小。例如源数据库配置了4块1T磁盘，后面扩盘只能扩数量，例如扩容到8块1T。

 切换与回退设计

• 在正式执行数据迁移之前，建议将源库克隆出测试库进行一次迁移测试。这一步骤至关重要，因为不同的物理环境可能会导致迁移所需的时间出现差异。通过测试迁移，不仅可以评估迁移过程中可能遇到的时间问题，而且可以验证迁移方案的可行性和有效性。此外，迁移测试还有助于识别潜在的问题和风险，从而在正式迁移之前采取相应的预防措施。

• 数据库切换前必须确认业务系统已完全停止对数据库的访问和写入。在进行切换时，DMP 允许用户选择是否在切换过程中自动关闭源数据库。通常情况下，为了确保业务顺利上线，我们会在业务系统上线前连接源数据库进行数据验证，此时无需自动关闭源数据库。然而，如果无法确保源数据库的数据写入操作已完全停止，或者在切换过程中担心源数据有变化，那么在进行切换时选择自动关闭源数据库将是一个更为稳妥的措施。

• 数据库迁移完成后，应更新业务系统连接地址，以确保通过目标数据库的服务IP进行访问。在网络环境中，如果存在访问控制策略，应在迁移前调整策略，以避免影响业务访问。如果是白名单模式，应允许最底层的全禁止策略；如果是黑名单模式，则应在最上层添加允许所有策略。待业务系统完全迁移后，再重新启用相应的访问控制策略。
• 在数据库成功迁移并经过业务验证之后，建议立即进行全面备份。这样，在目标数据库遇到无法迅速解决的问题时，可以迅速恢复到迁移后的状态。同时，建议保留源数据库的运行状态（但不要关闭服务器），以便在新平台出现问题时，能够迅速切换回源数据库继续提供服务。
• 在数据库迁移和切换过程中，必须确保源数据库环境的完整性不受破坏。如果在切换过程中遇到异常，或者在业务验证阶段发现问题，应立即联系深信服产品线专家和数据库管理员（DBA）寻求支持。在允许的时间范围内，应优先诊断问题，调整迁移参数或系统配置，以迅速恢复迁移流程。
• 在数据库迁移过程中，如果遇到无法在停机窗口期内迅速解决的异常问题，应立即回退到源数据库环境。在回退之前，需要分析失败的原因，并根据分析结果重新制定迁移计划。在决定回退时，要确保在迁移过程中没有新的业务数据写入到新数据库，以避免在回退过程中丢失最新的业务数据。

迁移过程说明

       通过DMP平台，用户可以在深信服的云计算环境中迅速搭建Oracle数据库，作为数据迁移的目标库。DMP平台利用深信服提供的数据库优化镜像，实现了从虚拟机操作系统到数据库应用的自动化和高效率部署过程。创建单机数据库只需要15分钟，创建 RAC集群也可以在90分钟到120分钟内完成，数据库实例在云平台自动调优保证最佳性能运行。本文所涉及的迁移过程是从Oracle单机迁移至RAC集群。

 创建目标库

       数据库创建完成后，作为备库开机，等待DTS创建迁移任务。迁移前请确保源库已开启归档日志、确保SSH处于开启状态且具备管理员权限、确保源端安装好NFS工具。数据库运行过程中可以在DMP监控界面对数据库状态信息进行实时状态监控。注：DMP管理平台仅提供Oracle等数据库的运维能力，并不包含官方license。

 数据迁移过程

       数据库迁移的过程利用DTS迁移工具来实现，在迁移工作启动之前，必须确保DTS-VM虚拟机地址具有对源数据库进行SSH连接（默认端口为22）的访问权限，以及源数据库地址能够访问DTS-VM的NFS服务（默认端口为2049和111）。以下是迁移的具体步骤：

       在确认源数据库和目标数据库的配置之后，接下来需要为数据库迁移设置实例参数、数据同步的频率、以及备份数据的压缩和加密策略。当启动DTS工具执行迁移任务时，它将自动进行一系列预检查，包括验证源和目标数据库之间的连通性、时区设置、数据库版本兼容性以及数据校验等。预检查中发现的“不通过项”将直接影响迁移任务的执行，必须在迁移前解决；而“告警项”则通常不会妨碍迁移过程，可以在人工审核后选择忽略，继续执行迁移任务。

       首先进行全量迁移过程，DTS会完成以下动作：启动目标端NFS服务、源库挂载NFS、源库备份控制文件和数据库文件、目标库启动至nomount、目标库restore控制文件、目标库启动至mount、目标库restore数据库文件、源库备份归档日志、目标库recover数据库文件、校验未记录的日志文件。全量迁移过程中对源库业务不会产生影响，建议在业务低峰期执行，或者减少并发数并时刻观察对生产业务产生的影响。所有DTS操作过程都会添加时间戳显示在前端，运维人员可实时监控整个迁移过程。

       在首次全量备份成功完成后，DTS系统将进入持续性的增量同步阶段。这一过程可以通过手动操作或自动化设置来实现。增量同步的核心任务是定期将源数据库的归档日志备份传输至目标数据库，并执行恢复操作。在增量迁移的过程中RMAN持续拷贝源数据库的增量日志来完成迁移，这种增量同步操作不会对源数据库的业务运行造成任何影响。

       根据深信服在用户端的迁移实践经验，使用千兆迁移网络时，全量数据迁移的理想速率为30MB/s，这使得每小时大约能够迁移100GB的数据。然而，迁移速率受多种因素影响，包括源数据库的数据结构、物理网络条件以及带宽限制。因此，实际迁移速度需要根据具体情况进行评估和调整。

 停库切换过程

       数据库迁移切换过程需要停库中断业务，在确定了停机时间后，应向各业务部门发布维护通知，停止业务和应用对源数据库的访问，避免产生数据丢失等意外情况产生。同时需协调业务人员、运维人员、应用厂商、深信服厂商等多方工作人员协助保障迁移切换和业务验证工作。

       数据库切换的整个流程由DMP平台自动化执行，涵盖了一系列关键步骤：①DMP备份源端数据库的最终归档日志；②在目标端执行数据恢复操作；③启动目标端的数据库服务。在这一过程中，DMP将重新编译所有无效的对象，确保数据库对象的可用性和一致性。最后，DMP将卸载源端和目标端的NFS挂载点，以完成切换过程。

       在数据库切换流程完全执行完毕后，所有源端数据将被成功迁移至目标端数据库。此时，可以对源端和目标端数据库进行连接，以进行数据的检查和校验，确保数据库状态的一致性。完成数据校验后，应协调业务团队成员进行业务访问测试。这一测试过程至关重要，从业务角度来看，它确保了系统能够正常工作，满足业务需求。

常见问题处置

       在执行数据库迁移任务时，DTS涉及多个步骤，这些步骤的复杂性要求高度的精确性和可靠性。为了应对这一挑战，DMP提供了一套全面的自动化检查工具和用户友好的前端界面。这些工具和界面旨在辅助用户识别并解决在迁移过程中可能遇到的技术问题，从而确保数据迁移的顺畅和高效。

 无法连接源端数据库SSH服务

       在使用RMAN执行数据库迁移任务时，DTS依赖于SSH服务来远程访问源数据库服务器，并执行NFS挂载及数据传输命令。如果源端数据库服务器的SSH服务无法正常访问，这将会影响数据库迁移任务的执行。在这种情况下，需要手动登录到源数据库服务器，启动SSH服务，并确保root用户具备SSH登录权限。此外，还应检查并关闭可能限制SSH访问的ACL策略。如果源端数据库已被DMP纳管，可以通过DMP提供的图形界面，按照提示进行相应的SSH服务配置和权限设置。

 源端数据库归档日志校验不通过

       在使用RMAN执行数据库迁移任务时，必须确保归档日志已被启用，否则会在迁移时影响迁移数据的完整性。DTS在迁移前会检查数据库配置，当发现归档日志未启用时会显示为不通过，并在界面提示开启归档日志的操作命令。

       注意：启用归档日志的过程需要在数据库关闭状态下进行配置更改，再重启数据库。因此，必须合理评估这一操作所需的时间，以避免对业务造成不必要的中断。

       为了启用归档日志，需要设置数据库初始化参数“log_archive_dest_1”。在设置此参数时，请确保指定的路径存在且具备读写权限，还需要有足够的存储空间来保存归档日志文件。

Oralce单机环境开启归档日志：

# su - oracle

# export ORACLE_SID=待迁移的实例名

# sqlplus / as sysdba

SQL> alter system set log_archive_dest_1='location=设置归档文件存放路径';

SQL> shutdown immediate;

SQL> startup mount;

SQL> alter database archivelog;

SQL> alter database open;

Oracle RAC环境开启归档日志：

# su - oracle

# export ORACLE_SID=待迁移的实例名

# srvctl stop database -d 数据库名

# srvctl start database -d 数据库名 -o mount

# sqlplus / as sysdba

SQL> alter database archivelog;

SQL> alter system set log_archive_dest_1='LOCATION=+LOG';

SQL> exit

# srvctl stop database -d 数据库名

# srvctl start database -d 数据库名 -o open

 源端数据库强制日志校验不通过

       在使用RMAN执行数据库迁移任务时，必须确保强制日志已被启用。因为当源数据库在迁移期间有大量写入操作时，若未启用强制归档日志，将无法保证所有写入操作都被记录在归档日志中。这可能导致在目标数据库恢复后出现数据块损坏的问题。

       根据Oracle文档ID 958181.1所述，使用RMAN增量备份滚动备用数据库时，如果存在未记录日志的更改（nologging changes），则可能导致备用数据库无法正确同步。为避免这种情况，启用强制归档日志是至关重要的。这样做可以确保在迁移过程中，所有的数据库操作都被准确地记录在归档日志中，从而保证了数据的完整性和一致性。

数据库内检查强制日志是否开启：

# su - oracle

# export ORACLE_SID=待迁移的实例名

# sqlplus / as sysdba

SQL> alter database force logging;

 offline数据导致备份恢复失败

       使用RMAN执行数据库迁移任务时，如果源数据库存在处于offline状态的数据文件，这可能会导致备份和恢复任务遭遇失败。原因在于RMAN无法对offline的数据文件进行备份，这些文件在备份过程中会被忽略，从而导致备份数据的不完整。在恢复阶段，由于缺少这些关键文件，恢复操作也可能无法成功完成。

       为了避免这种情况，在进行数据库迁移之前，必须确保所有的数据文件都处于online状态。这可以通过执行相应的SQL命令将offline文件重新激活，以确保它们能够被RMAN正常备份。这一步骤对于保障迁移过程中数据的完整性和恢复任务的成功至关重要。

数据库内将offline数据文件上线：

SQL> select name,status from v$datafile where status in ('RECOVER','OFFLINE');

SQL> recover datafile '已离线的数据文件';

SQL> alter database datafile '已离线的数据文件' online;

迁移完成后，把此数据还原为offline：

SQL> alter database datafile '需要下线的数据文件' offline ;

       云话技术是深信服打造的一档云技术内容专栏，将定期为大家推送云计算相关的技术解析、场景实践等内容，为大家深度解析深信服在云计算领域的创新能力、技术动态、场景应用及前瞻分析。