相关文章推荐
曾经爱过的小蝌蚪  ·  章子怡汪峰几个孩子 ...·  9 月前    · 
失恋的柿子  ·  约翰尼-德普新戏2000万美元 ...·  10 月前    · 
心软的芒果  ·  百年老产业 奔向千亿新丝路_重庆市商务委员会·  1 年前    · 
有腹肌的黄花菜  ·  上司是傲娇历史人物资源,故事 - 快看漫画·  1 年前    · 
满身肌肉的扁豆  ·  犯罪都市2 - ...·  1 年前    · 
Code  ›  MySQL整库迁移到RDS服务-数据治理中心 DataArts Studio-用户指南-数据集成-使用教程 - 天翼云
mysql rds mysql导入sql文件 数据治理
https://www.ctyun.cn/help2/10014064/10120192
爱看书的小狗
1 年前

最新活动

天翼云最新优惠活动,涵盖免费试用,产品折扣等,助您降本增效!
查看全部活动
热门活动
  • 云上钜惠 HOT 限制抢购 爆款云主机畅享3个月只要33元起!
  • 中小企业上云场景组合购 NEW 建站、域名等场景一站式购齐,组合购9元起!
  • 天翼云·创新直播间 NEW 与专家共同解读云计算领域前沿趋势
  • 新客特惠 NEW 热销云主机秒杀低至0.85折!
  • 天翼云电脑专场 HOT 移动办公神器天翼云电脑4核8G畅享3个月只要130元起!
  • 云主机特惠 HOT 新老同享云主机2.5折起,升级高性能云主机更划算!
免费活动
  • 企业免费试用专区 HOT 数十款产品免费试用,完成企业实名认证领取2000元试用金!
  • 个人免费试用专区 HOT 完成个人实名认证即可获得1000元试用金!
  • 新客特惠 爆款云主机0.85折起
  • 云上安全专场 安全产品全场6折起!

应用商城

天翼云精选行业优秀合作伙伴及千余款商品,提供一站式云上应用服务。
进入甄选商城 进入云市场
办公协同
  • WPS云文档天翼云版 翼企云( License版) 天翼云企业云盘(标准服务版) 蓝信安全移动工作平台(SAAS) SSL证书 新域名服务 税务风控云 商企云财税(SAAS版) 翼云加速-标准版包月套餐 天翼云管家2.0 天翼云管家 翼备份(SaaS版)300G 智慧工厂_生产流程管理解决方案 天翼智慧工地 天翼全栈混合云敏捷版(软件) 天翼全栈混合云敏捷版(一体机)

合作伙伴

天翼云携手合作伙伴,共创云上生态,合作共赢
天翼云生态合作中心
  • 天翼云生态合作中心
天翼云技术合作伙伴
  • 天翼云OpenAPI中心 天翼云诸葛AI平台 天翼云EasyCoding平台
天翼云渠道合作伙伴
  • 天翼云代理渠道合作伙伴
天翼云培训认证
  • 天翼云学堂 天翼云市场商学院
天翼云服务合作伙伴
  • 天翼云MSP合作伙伴
天翼云合作计划
  • 央企云合作计划
天翼云应用合作伙伴
  • 天翼云云市场合作伙伴 天翼云甄选商城合作伙伴

开发者

开发者相关功能入口汇聚
技术社区
资源与工具
  • 天翼云OpenAPI EasyCoding敏捷开发平台 AI创作间
培训与认证
  • 天翼云学堂 天翼云认证

支持与服务

为您提供全方位支持与服务,全流程技术保障,助您轻松上云,安全无忧
文档与工具
  • OpenAPI中心 客户支持计划

了解天翼云

天翼云秉承央企使命,致力于成为数字经济主力军,投身科技强国伟大事业,为用户提供安全、普惠云服务
品牌介绍
  • 关于天翼云 天翼云4.0 天翼云APP 全球基础设施 分析师和白皮书 2023云生态大会 2022云生态大会 天翼云中国行 支持与服务 了解天翼云
    • 弹性云主机
    • 天翼云电脑(公众版)
    • 对象存储
    搜索发现
    弹性云主机 天翼云电脑(公众版) 对象存储 云硬盘 边缘安全加速平台 云专线CDA 服务器安全卫士 云堡垒机 关系数据库MySQL版 关系数据库PostgreSQL版
  • 站点切换
    • 中国站
  • 文档
  • 控制中心
  • 备案中心
  • 管理中心

查看所有产品

数据治理中心 DataArts Studio

  • 约束与限制 数据治理中心DataArts Studio与其他服务的关系 准备工作简介 创建DataArts Studio实例 创建DataArts Studio基础包 (可选)创建DataArts Studio增量包 管理工作空间 创建并管理工作空间 (可选)修改作业日志存储路径 授权用户使用DataArts Studio 创建IAM用户并授予DataArts Studio权限 添加工作空间成员和角色 (可选)获取认证信息 使用DataArts Studio前的准备 DataArts Studio支持的数据源 创建数据连接 新建MRS Hive连接 新建DWS连接 新建MySQL连接 数据集成概述 约束与限制 支持的数据源 创建CDM集群 解绑/绑定集群的EIP 下载集群日志 查看集群基本信息/修改集群配置 查看监控指标 支持的监控指标 设置告警规则 查看监控指标 管理Agent 管理集群配置 配置常见关系数据库连接 配置分库连接 配置MySQL数据库连接 配置Oracle数据库连接 配置DLI连接 配置Hive连接 配置HBase连接 配置HDFS连接 配置OBS连接 配置FTP/SFTP连接 配置Redis/DCS连接 配置DDS连接 配置CloudTable连接 配置CloudTable OpenTSDB连接 配置MongoDB连接 配置Cassandra连接 配置Kafka连接 配置DMS Kafka连接 配置Elasticsearch/云搜索服务(CSS)连接 新建表/文件迁移作业 新建整库迁移作业 配置作业源端参数 配置OBS源端参数 配置HDFS源端参数 配置HBase/CloudTable源端参数 配置Hive源端参数 配置DLI源端参数 配置FTP/SFTP源端参数 配置HTTP源端参数 配置MySQL源端参数 配置分库源端参数 配置MongoDB/DDS源端参数 配置Redis源端参数 配置Kafka/DMS Kafka源端参数 配置Elasticsearch或云搜索服务源端参数 配置OpenTSDB源端参数 配置作业目的端参数 配置OBS目的端参数 配置HDFS目的端参数 配置HBase/CloudTable目的端参数 配置Hive目的端参数 配置常见关系数据库目的端参数 配置DWS目的端参数 配置DDS目的端参数 配置DCS目的端参数 配置云搜索服务目的端参数 配置DLI目的端参数 配置OpenTSDB目的端参数 配置定时任务 作业配置管理 管理单个作业 批量管理作业 支持云审计的关键操作 如何查看审计日志 创建MRS Hive连接器 创建MySQL连接器 MySQL数据迁移到MRS Hive分区表 MySQL数据迁移到OBS MySQL数据迁移到DWS MySQL整库迁移到RDS服务 Oracle数据迁移到云搜索服务 Oracle数据迁移到DWS OBS数据迁移到云搜索服务 OBS数据迁移到DLI服务 MRS HDFS数据迁移到OBS Elasticsearch整库迁移到云搜索服务 DDS数据迁移到DWS 增量迁移原理介绍 文件增量迁移 关系数据库增量迁移 时间宏变量使用解析 HBase/CloudTable增量迁移 事务模式迁移 迁移文件时加解密 MD5校验文件一致性 指定文件名迁移 正则表达式分隔半结构化文本 记录数据迁移入库时间 文件格式介绍 数据架构概述 数据架构使用流程 添加审核人 管理配置中心 新建数据标准 逻辑模型设计 物理模型设计 管理维度表 新建事实表 新建原子指标 新建衍生指标 新建复合指标 新建时间限定 数据集市建设 新建汇总表 逆向数据库(关系建模) 逆向数据库(维度建模) 导入导出表 关联质量规则 批量修改主题/目录/流程 数据架构示例 数据开发概述 数据管理流程 新建数据连接 新建数据库 (可选)新建数据库模式 新建数据表 脚本开发流程 开发SQL脚本 开发Shell脚本 开发Python脚本 提交版本并解锁 (可选)管理脚本 复制名称与重命名脚本 移动脚本/脚本目录 导出导入脚本 查看脚本引用 迁移脚本责任人 作业开发流程 提交版本并解锁 (可选)管理作业 复制名称和重命名作业 移动作业/作业目录 导出导入作业 迁移作业责任人 批作业监控 实时作业监控 补数据监控 通知周期概览 配置环境变量 配置OBS桶 管理作业标签 配置默认项 节点数据血缘 配置数据血缘 查看数据血缘 CDM Job Rest Client Import GES MRS Kafka Kafka Client ROMA FDI Job DLI Flink Job DLI SQL DLI Spark DWS SQL MRS Spark SQL MRS Hive SQL MRS Presto SQL MRS Spark MRS Spark Python MRS Flink Job MRS MapReduce Shell RDS SQL ETL Job Python Create OBS Delete OBS OBS Manager Open/Close Resource Data Quality Monitor Sub Job For Each Dummy EL表达式参考 表达式概述 基础操作符 日期和时间模式 Env内嵌对象 Job内嵌对象 StringUtil内嵌对象 DateUtil内嵌对象 JSONUtil内嵌对象 Loop内嵌对象 OBSUtil内嵌对象 表达式使用示例 作业依赖详解 IF条件判断教程 获取Rest Client算子返回值教程 For Each算子使用介绍 开发一个Python脚本 开发一个DWS SQL作业 开发一个Hive SQL作业 开发一个DLI Spark作业 开发一个MRS Flink作业 开发一个MRS Spark Python作业 业务指标监控 业务指标监控概述 新建业务场景 查看业务场景实例 数据质量监控 数据质量监控概述 新建规则模板 新建质量作业 新建对账作业 查看规则实例 查看质量报告 新建一个业务场景 新建一个质量作业 新建一个作业对账实例 数据权限简介 数据目录权限 数据表权限 数据安全(待下线) 数据安全简介 元数据采集 元数据简介 开发一个增量元数据采集任务 通过数据地图查看数据血缘关系 配置数据血缘 查看数据血缘 数据服务概览 开发API 创建专享版集群 新建审核人 创建API 配置模式生成API 脚本模式生成API 注册API 调试API 发布API 管理API 设置API可见 停用/恢复API 下线/删除API 复制API 全量导出/导出/导入API 调用API 审核中心操作说明 数据治理中心 DataArts Studio产品服务协议 数据治理中心 DataArts Studio产品服务等级协议 数据治理中心 DataArts Studio用户操作指南 数据治理中心 DataArts Studio MySQL整库迁移到RDS服务
MySQL整库迁移到RDS服务
最近更新时间: 2023-06-07 08:44:09
分享文章
  • 新浪微博
  • 微信
    扫码分享
  • 复制链接
本章节主要介绍整库迁移到RDS服务。

本章节介绍使用CDM整库迁移功能,将本地MySQL数据库迁移到云服务RDS中。

当前CDM支持将本地MySQL数据库,整库迁移到RDS上的MySQL、PostgreSQL或者Microsoft SQL Server任意一种数据库中。这里以整库迁移到RDS上的MySQL数据库为例进行介绍,使用流程如下:

1.创建CDM集群并绑定EIP

2.创建MySQL连接

3.创建RDS连接

4.创建整库迁移作业

  • 用户拥有EIP配额。
  • 用户已创建RDS数据库实例,该实例的数据库引擎为MySQL。
  • 本地MySQL数据库可通过公网访问。如果MySQL服务器是在本地数据中心或第三方云上,需要确保MySQL可以通过公网IP访问,或者是已经建立好了企业内部数据中心到云服务平台的VPN通道或专线。
  • 已获取本地MySQL数据库和RDS上MySQL数据库的IP地址、数据库名称、用户名和密码。
  • 用户已参考 管理驱动 ,上传了MySQL数据库驱动。
  • 创建CDM集群并绑定EIP

    1.参考 创建CDM集群 ,创建CDM集群。

    关键配置如下:

  • CDM集群的规格,按待迁移的数据量选择,一般选择cdm.medium即可,满足大部分迁移场景。
  • CDM集群的VPC,选择和RDS的MySQL数据库实例所在的VPC一致,且推荐子网、安全组也与RDS上的MySQL一致。
  • 如果安全控制原因不能使用相同子网和安全组,则可以修改安全组规则,允许CDM访问RDS。
  • 2.CDM集群创建完成后,选择集群操作列的“绑定弹性IP”,CDM通过EIP访问本地MySQL数据库。

    图 集群列表

    如果用户对本地数据源的访问通道做了SSL加密,则CDM无法通过弹性IP连接数据源。

    创建MySQL连接

    1.在CDM集群管理界面,单击集群后的“作业管理”,选择“连接管理 > 新建连接”,进入连接器类型的选择界面。

    2.选择“MySQL”后单击“下一步”,配置MySQL连接的参数。

    单击“显示高级属性”可查看更多可选参数,具体请参见 配置常见关系数据库连接。这里保持默认,必填参数如下表所示。

    表 MySQL连接参数

    如果保存时出错,一般是由于MySQL数据库的安全设置问题,需要设置允许CDM集群的EIP访问MySQL数据库。

    创建RDS连接

    1.单击CDM集群后的“作业管理”,进入作业管理界面,再选择“连接管理 > 新建连接”,进入选择连接器类型的界面。

    2.连接器类型选择“云数据库 MySQL”后单击“下一步”,配置连接参数:

    名称:用户自定义连接名称,例如:“rds_link”。

    数据库服务器、端口:配置为RDS上MySQL数据库的连接地址、端口。

    数据库名称:配置为RDS上MySQL数据库的名称。

    用户名、密码:登录数据库的用户和密码。

    创建RDS连接时,“使用本地API”设置为“是”时,可以使用MySQL的LOAD DATA功能加快数据导入,提高导入数据到MySQL的性能。

    由于RDS上的MySQL默认没有开启LOAD DATA功能,所以同时需要修改MySQL实例的参数组,将“local_infile”设置为“ON”,开启该功能。

    如果“local_infile”参数组不可编辑,则说明是默认参数组,需要先创建一个新的参数组,再修改该参数值,并应用到RDS的MySQL实例上。

    3.单击“保存”回到连接管理界面。

    创建整库迁移作业

    1.两个连接创建完成后,选择“整库迁移 > 新建作业”,开始创建迁移任务,如下图所示。

    图 创建整库迁移作业

  • 作业名称:用户自定义整库迁移的任务名称。
  • 源端作业配置
  • 源连接名称:选择上述 创建MySQL连接 中的“mysql_link”。
  • 模式或表空间:选择从本地MySQL的哪个数据库导出数据。
  • 目的端作业配置
  • −目的连接名称:选择上述 创建RDS连接 中的“rds_link”。

    −模式或表空间:选择将数据导入到RDS的哪个数据库。

    −自动创表:选择“不存在时创建”,当RDS数据库中没有本地MySQL数据库里的表时,CDM会自动在RDS数据库中创建那些表。

    −导入前清空数据:选择“是”,当RDS数据库中存在与本地MySQL数据库重名的表时,CDM会清除RDS中重名表里的数据。

    −高级属性里的可选参数保持默认即可。

    2.单击“下一步”,进入选择待迁移表的界面,您可以选择全部或者部分表进行迁移。

    3.单击“保存并运行”,CDM会立即开始执行整库迁移任务。

    作业任务启动后,每个待迁移的表都会生成一个子任务,单击整库迁移的作业名称,可查看子任务列表。

    4.单击作业操作列的“历史记录”,可查看该作业的历史执行记录、读取和写入的统计数据。

    整库迁移的作业没有日志,子作业才有。在子作业的历史记录界面单击“日志”,可查看作业的日志信息。

    上一篇 :  MySQL数据迁移到DWS 下一篇 :  Oracle数据迁移到云搜索服务
    文本反馈

    鼠标选中文档,精准反馈问题 选中存在疑惑的内容,即可快速反馈问题,我们会跟进处理

    推荐助力领好礼 邀请好友完成推荐任务 最高可得千元电信卡
    查看详情
    • 7*24小时售后
    • 无忧退款
    • 免费备案
    • 专家服务
    售前咨询热线
    400-810-9889转1
    • 天翼云APP 微信公众号
    服务与支持
    • 备案中心
    • 售前咨询
    • 智能客服
    • 自助服务
    • 工单管理
    • 客户公告
    账户管理
    • 管理中心
    • 订单管理
    • 余额管理
    • 发票管理
    • 充值汇款
    • 续费管理
    快速入口
    • 文档中心
    • 最新活动
    • 免费试用
    • 安全专区
    • 信任中心
    • 天翼云学堂
    云网生态
    • 甄选商城
    • 渠道合作
    • 云市场合作
    了解天翼云
    • 关于天翼云
    • 天翼云APP
    • 服务案例
    • 新闻资讯
    • 联系我们
    • 校园招聘
    热门产品
    • 弹性云主机
    • 天翼云桌面
    • 天翼云电脑
    • 天翼云手机
    • 关系型数据库
    • 对象存储
    • 云硬盘
    • Web应用防火墙
    • 服务器安全卫士
    • 天翼云办公
    热门推荐
    • 云服务备份
    • 云空间
    • 全站加速
    • 安全加速
    • 超融合服务-iStack
    • 智能边缘云
    • 应用编排服务
    • 微服务引擎
    • 共享流量包
    更多推荐
    • web应用防火墙
    • 密钥管理
    • 等保咨询
    • 安全专区
    • 应用运维管理
    • 云日志服务
    • 云网融合
    • 云搜索服务
    • 数据湖探索
    • 数据仓库服务
    友情链接
    • 天翼云盘
    • 天翼企业云盘
    • 189邮箱
    • 中国电信集团
    ©2023 京ICP备 2021034386号 增值电信业务经营许可证A2.B1.B2-20090001 公司地址:北京市东城区青龙胡同甲1号、3号2幢2层205-32室
    • 用户协议
    • 隐私政策
    • 法律声明
    • 智能客服
      7*24小时不间断售后保障
     
    推荐文章
    曾经爱过的小蝌蚪  ·  章子怡汪峰几个孩子 章子怡汪峰离婚真正原因是啥?_中华网
    9 月前
    失恋的柿子  ·  约翰尼-德普新戏2000万美元 海盗变摇滚乐手-搜狐娱乐
    10 月前
    心软的芒果  ·  百年老产业 奔向千亿新丝路_重庆市商务委员会
    1 年前
    有腹肌的黄花菜  ·  上司是傲娇历史人物资源,故事 - 快看漫画
    1 年前
    满身肌肉的扁豆  ·  犯罪都市2 - 720P|1080P高清下载 - 日韩电影 - BT天堂
    1 年前
    今天看啥   ·   Py中国   ·   codingpro   ·   小百科   ·   link之家   ·   卧龙AI搜索
    删除内容请联系邮箱 2879853325@qq.com
    Code - 代码工具平台
    © 2024 ~ 沪ICP备11025650号