# 批量数据采集
# 功能描述
批量数据采集提供端到端的批量数据同步采集能力,通过设置源端和目标端数据源及需要同步的数据表信息,创建批量采集任务,配置定时调度策略,实现快速的数据采集作业配置化能力,实现简单数据迁移场景。
# 字段说明
参数 | 说明 |
---|---|
任务名称 | 任务名称,用于显示和区分。 |
选择源数据源 | 从公共资源中选择已经配置好的数据源作为源端数据源。 |
选择目标数据源 | 从公共资源中选择已经配置好的数据源作为目标数据源。 |
表映射 | 从源端数据源的源数据中选择需要同步的数据表。 |
表添加模式 | 表添加模式共有4种,分别是 * 重新创建表:即同步时不管表是否存在都会先删除表后重新创建。 * 表不存在时创建:同步时若表不存在则创建,如果已经存在则不作为。 * 表不存在时报告错误:同步时如果表不存在则任务执行报错,提示异常。 * 忽略对表的处理:跳过判断表是否存在的环节,直接执行数据操作。 |
数据添加模式 | 数据添加模式一共有3种,分别是: * 同步前删除数据:先清空数据表再插入数据。 * 添加数据:只做insert,不管表里是否有数据。 * 当存在数据时,报告错误:如果表存在数据,就直接报错,不做任何操作。如果不存在就insert。 |
# 操作说明
# 新增任务
通过菜单打开互动交流页面,填写问题单相关内容
“提交”:点击“提交”按钮, 提交表单。
# 立即执行
# 定时调度
# 其他
- 删除:删除任务。
- 上线/下线:上线/下线任务,下线的任务不会自动执行,需要手动恢复上线状态。
- 查看历史:查看任务的历史执行情况。