普元数据资产管理平台 普元数据资产管理平台
  • 7.1GA (opens new window)
  • 7.1.1 (opens new window)
  • 7.2GA (opens new window)
  • 7.3GA (opens new window)
  • 7.3.1 (opens new window)
产品简介
快速开始
安装指南
业务门户
管理门户
技术门户
常见问题解答
开发指南
更新日志
  • 批量数据采集
  • 功能描述
  • 字段说明
  • 操作说明
  • 新增任务
  • 立即执行
  • 定时调度
  • 其他

# 批量数据采集

# 功能描述

批量数据采集提供端到端的批量数据同步采集能力,通过设置源端和目标端数据源及需要同步的数据表信息,创建批量采集任务,配置定时调度策略,实现快速的数据采集作业配置化能力,实现简单数据迁移场景。 problem_list

# 字段说明

参数 说明
任务名称 任务名称,用于显示和区分。
选择源数据源 从公共资源中选择已经配置好的数据源作为源端数据源。
选择目标数据源 从公共资源中选择已经配置好的数据源作为目标数据源。
表映射 从源端数据源的源数据中选择需要同步的数据表。
表添加模式 表添加模式共有4种,分别是
* 重新创建表:即同步时不管表是否存在都会先删除表后重新创建。
* 表不存在时创建:同步时若表不存在则创建,如果已经存在则不作为。
* 表不存在时报告错误:同步时如果表不存在则任务执行报错,提示异常。
* 忽略对表的处理:跳过判断表是否存在的环节,直接执行数据操作。
数据添加模式 数据添加模式一共有3种,分别是:
* 同步前删除数据:先清空数据表再插入数据。
* 添加数据:只做insert,不管表里是否有数据。
* 当存在数据时,报告错误:如果表存在数据,就直接报错,不做任何操作。如果不存在就insert。

# 操作说明

# 新增任务

通过菜单打开互动交流页面,填写问题单相关内容 problem_list “提交”:点击“提交”按钮, 提交表单。

# 立即执行

problem_list

# 定时调度

problem_list

# 其他

  • 删除:删除任务。
  • 上线/下线:上线/下线任务,下线的任务不会自动执行,需要手动恢复上线状态。
  • 查看历史:查看任务的历史执行情况。
上次更新: 2025/5/6上午10:51:41

← 系统管理 敏感规则 →