大网数据广告活动
数据库部署与 SQL 参考

从其他 AP 系统迁移数据

· 52CE 我爱测

本文介绍将其他 AP(分析型)系统中的数据迁移到 Apache Doris 的常见方式,帮助你根据源系统类型与现有技术栈选择合适的迁移路径。

本文介绍将其他 AP(分析型)系统中的数据迁移到 Apache Doris 的常见方式,帮助你根据源系统类型与现有技术栈选择合适的迁移路径。

迁移方式概览

根据源系统类型与可用工具,从其他 AP 系统迁移数据到 Doris 主要有以下三种方式:

迁移方式 适用场景 关键组件
Multi-Catalog + Insert Into 源系统为 Hive、Iceberg、Hudi 等支持外部目录映射的系统 Multi-Catalog、Insert Into
中间文件中转 源系统支持导出为 CSV 等通用数据格式 数据导出工具、Doris 文件导入
Connector 对接 已有 Spark / Flink 作业,或需要程序化迁移 Spark/Flink AP Connector、Doris Connector

迁移方式详解

方式一:通过 Multi-Catalog 映射为外表后导入

适用于 Hive、Iceberg、Hudi 等可被 Doris Multi-Catalog 识别的系统。

  • 在 Doris 中通过 Multi-Catalog 将源系统映射为外表
  • 使用 Insert Into 将外表数据写入 Doris 内表

方式二:通过中间文件中转

适用于源系统不便直接对接,但支持数据导出的场景。

  • 从原 AP 系统中将数据导出为 CSV 等通用数据格式
  • 再将导出的数据文件导入到 Doris

方式三:通过 Spark / Flink Connector 写入

适用于已有 Spark / Flink 数据处理链路,或需要在迁移过程中进行清洗/转换的场景。

  • 使用 AP 系统对应的 Spark / Flink Connector 读取源数据
  • 使用 Doris Connector 将数据写入 Doris

FAQ

Q:如果我使用的 AP 系统不在上述列表中怎么办?

如果有其他迁移工具或方式可加入此列表,欢迎联系 dev@doris.apache.org。

如果有其他迁移工具可以加入此列表,可以联系 dev@doris.apache.org

本文来自 Apache Doris 文档贡献者,按 Apache 2.0 整理版式与相对链接,保留正文与代码。图示请参阅原文。作者与贡献记录。

资料来源与适用范围

资料来源
Apache Doris 文档贡献者
适用范围
master 文档快照(2026-11-16)
内容语言
中文;命令、路径和错误标识保留技术原文
本地收录日期
2026-11-16
授权说明
Apache 2.0

正文与所需资源由本站本地存储。查看来源及更新记录 ↗

请按适用版本和实际日志确认原因;本站没有对每一种系统或设备逐项执行文中的操作。