当前位置: 首页 > article >正文

OceanBase 大数据量导入(obloader)

现需要将源数据库(Oracle|MySQL等)一些表的海量数据迁移到目标数据库 OceanBase 中,基于常规 jdbc 驱动编码的方式涉及开发工作,性能效率也要看编码的处理机制。

OceanBase 官方提供了的 OceanBase Migration Service (OMS) 数据迁移工具,这个是需要部署的,存在一定的麻烦程度,适合专门的数据库管理员长期使用。对于开发者或者项目组临时迁移某表数据,官方提供的 纯客户端工具OBLoader 在常规数据一次性迁移的场景下,综合来说更简单方便。

迁移数据的方式如下图所示:

在这里插入图片描述

官方提供的迁移方案具体支持情况如下:

迁移方案结构迁移全量数据迁移增量数据迁移数据校验支持的数据源
OMS支持支持支持支持OceanBase MySQL Oracle PostgreSQL DB2_LUW TiDB Kafka RocketMQ Datahub
obloader & obdumper支持支持不支持不支持OceanBase
SQL 脚本迁移支持支持不支持不支持主流数据库,但无法跨实例做数据迁移
MyDumper支持支持不支持不支持MySQL 兼容的数据源
DataX不支持支持不支持不支持较多,具体范围查看官方文档
OUTFILE 语句不支持支持不支持不支持MySQL OceanBase
DBCAT支持不支持不支持不支持较多,具体范围查看官方文档

OBLoader 官方文档:

  • 工具下载

  • 快速入门

  • 性能调优

这里只是列出了几个主要链接,更多操作官方文档都有。


(END)


http://www.kler.cn/a/413908.html

相关文章:

  • Vue+Elementui el-tree树只能选择子节点并且支持检索
  • Unity shaderlab 实现LineSDF
  • 【Flink-scala】DataStream编程模型之 窗口的划分-时间概念-窗口计算程序
  • BUUCTF—Reverse—不一样的flag(7)
  • Elasticsearch与CCS跨集群搜索:深入讲解与实战演练
  • 嵌入式硬件实战基础篇(四)多路直流稳压电源
  • 【论文复现】农作物病害叶子图像分割
  • c# httppost请求接口传参数及图片上传,非常实用
  • 电子应用设计方案-28:智能云饭锅系统方案设计
  • 网络--传输层协议--UDP
  • 【C#】调用外部应用
  • Network Link Conditioner Mac 上模拟网络环境工具的安装和使用
  • Mybatis-plus 3.5.9 版本 PaginationInnerInterceptor 插件更新
  • 数据结构与算法学习笔记----并查集
  • 人工智能中的数据结构:构建智能算法的基石
  • 3D技术如何应用到汽车营销中?
  • OpenCV相机标定与3D重建(6)将3D物体点投影到2D图像平面上函数projectPoints()的使用
  • log4c库使用
  • 【数据结构与算法】链表之美-复杂链表的复制与链表的插入排序
  • 占用磁盘100%?Apache DolphinScheduler 日志如何定时清理!
  • IntelliJ+SpringBoot项目实战(十七)--在SpringBoot中整合SpringSecurity和JWT(下B)
  • Excel按固定行数拆分为多个Excel
  • 屏幕触控支持指纹修改
  • 数据集成工具Kafka、Nifi和Talend功能大对比!
  • Jenkins的使用
  • 【Git】常用命令汇总