时间戳关系型数据库到主数据增量同步（增量）

• 说明
• 配置项说明
• 使用示例
  • PDI-MySQL到主数据增量同步
• FAQ

说明

时间戳关系型数据库到主数据增量同步（增量）：用于关系型数据库到主数据的增量数据迁移，可以将来源库的单个表数据通过数据清洗规则处理发送到主数据系统。

数据库同步一共有四步：

• 第一步：创建通用模板作业，选择处理引擎 "Primeton DI"，选择"全量同步"，选择"关系型数据库到主数据同步"模板。
• 第二步：选择来源数据源名称、数据库名称、数据表。
• 第三步：选择主数据模型。
• 第四步：选择源表时间戳字段和目标表时间戳字段。
• 第五步：在字段映射中获取字段。
• 第六步：在选择规则中获取字段，配置数据清洗规则。
• 第七步：保存模版。

配置项说明

配置项	是否必填	默认值	描述
数据源（来源）	是	-	来源数据的数据源名称，该选项是已经在项目配置中添加过的数据源。
库/Schema（来源）	是	-	来源数据源中的数据库名称。选择来源数据源后自动读取并显示数据库名称，可以直接选择。
数据表（来源）	是	-	来源数据表名称。
主数据模型	是	-	主数据提供的模型。
源表字段	是	-	根据实际场景选择源表时间戳字段，用于从源表查询增量数据。
目标表字段	是	-	根据实际场景选择目标表时间戳字段，用于从目标表查询出最大时间。
字段映射	是	-	从来源表中获取出字段，以供修改。
选择规则	是	-	根据实际场景使用清洗规则对字段进行处理。
批量提交大小	是	1	每次通过HTTP请求给主数据发送的数据条数。
请求地址	否	-	调用主数据的HTTP地址。
请求方法	否	-	调用主数据的HTTP方法。
请求头配置	否	-	调用主数据的HTTP请求头。
请求参数配置	否	-	调用主数据的HTTP请求参数。