从小数据量 MySQL 迁移数据到 TiDB

    一般而言，受到表结构索引数目等信息、硬件以及网络环境影响，迁移速率在 30～50GB/h 不等。使用 TiDB DM 迁移的流程如下图所示。

    第 1 步：创建数据源

    首先，新建 文件，写入以下内容：

    其次，在终端中执行下面的命令后，使用 tiup dmctl 将数据源配置加载到 DM 集群中:

    1. tiup dmctl --master-addr ${advertise-addr} operate-source create source1.yaml

    新建 文件，写入以下内容：

    以上内容为执行迁移的最小任务配置。关于任务的更多配置项，可以参考 。

    第 3 步：启动任务

    在你启动数据迁移任务之前，建议使用 check-task 命令检查配置是否符合 DM 的配置要求，以避免后期报错。

    1. tiup dmctl --master-addr ${advertise-addr} check-task task.yaml

    使用 tiup dmctl 执行以下命令启动数据迁移任务。

    参数描述
    —master-addrdmctl 要连接的集群的任意 DM-master 节点的 {advertise-addr}，例如： 172.16.10.71:8261
    参数用于启动数据迁移任务

    如果任务启动失败，可根据返回结果的提示进行配置变更后执行 start-task task.yaml 命令重新启动任务。遇到问题请参考以及常见问题。

    如需了解 DM 集群中是否存在正在运行的迁移任务及任务状态等信息，可使用 tiup dmctl 执行 query-status 命令进行查询：

      关于查询结果的详细解读，请参考查询状态。

      第 5 步：监控任务与查看日志（可选）

      要查看迁移任务的历史状态以及更多的内部运行指标，可参考以下步骤。

      DM 在运行过程中，DM-worker、DM-master 及 dmctl 都会通过日志输出相关信息。各组件的日志目录如下：

      • DM-master 日志目录：通过 DM-master 进程参数 --log-file设置。如果使用 TiUP 部署 DM，则日志目录默认位于 /dm-deploy/dm-master-8261/log/。
      • DM-worker 日志目录：通过 DM-worker 进程参数 --log-file 设置。如果使用 TiUP 部署 DM，则日志目录默认位于 。