天天看点

yugong阿里巴巴去Oracle数据迁移同步工具(全量+增量,目标支持MySQL/DRDS)

项目介绍

名称:   yugong

译意:   愚公移山

语言:   纯java开发

定位:   数据库迁移 (目前主要支持oracle / mysql / DRDS)

https://github.com/alibaba/yugong#%E9%A1%B9%E7%9B%AE%E4%BB%8B%E7%BB%8D-1

整个数据迁移过程,分为两部分:

  1. 全量迁移
  2. 增量迁移
yugong阿里巴巴去Oracle数据迁移同步工具(全量+增量,目标支持MySQL/DRDS)

过程描述:

  1. 增量数据收集 (创建oracle表的增量物化视图)
  2. 进行全量复制
  3. 进行增量复制 (可并行进行数据校验)
  4. 原库停写,切到新库

架构

yugong阿里巴巴去Oracle数据迁移同步工具(全量+增量,目标支持MySQL/DRDS)

{width="584" height="206"}

说明: 

  1. 一个Jvm Container对应多个instance,每个instance对应于一张表的迁移任务
  2.  instance分为三部分 a.  extractor  (从源数据库上提取数据,可分为全量/增量实现) b.  translator  (将源库上的数据按照目标库的需求进行自定义转化) c.  applier  (将数据更新到目标库,可分为全量/增量/对比的实现)

https://github.com/alibaba/yugong#%E6%96%B9%E6%A1%88%E8%AE%BE%E8%AE%A1 方案设计

DevDesign

https://github.com/alibaba/yugong#%E5%BF%AB%E9%80%9F%E5%BC%80%E5%A7%8B 快速开始

QuickStart

https://github.com/alibaba/yugong#%E8%BF%90%E7%BB%B4%E7%AE%A1%E7%90%86 运维管理

AdminGuide

https://github.com/alibaba/yugong#%E6%80%A7%E8%83%BD%E6%8A%A5%E5%91%8A 性能报告

Performance

https://github.com/alibaba/yugong#%E7%9B%B8%E5%85%B3%E8%B5%84%E6%96%99 相关资料

  1. yugong简单介绍ppt: ppt
  2. 分布式关系型数据库服务DRDS (前身为阿里巴巴公司的Cobar/TDDL的演进版本, 基本原理为MySQL分库分表)

https://github.com/alibaba/yugong#%E6%B2%9F%E9%80%9A%E4%B8%8E%E4%BA%A4%E6%B5%81 沟通与交流

  1. 详见 wiki home 页