更新时间:2022-08-13 21:23:29
说明:通用数据流功能仅 3.0.15.3 以下版本支持。
通用数据流主要用于第三方端口调取和 AnyRobot 系统内数据流转场景,具体操作如下:
1. 进入数据源>数据流页面,点击【新建】进入新建数据流任务页面,点击【通用数据流】显示配置参数,如下所示:

元素名称 元素说明
数据源设置 *选择类型 选择匹配数据源的方式:手动选择/自动匹配
*选择索引库 选择需获取数据流所属的索引库:
• 手动选择:可在索引库下拉列表中,点击选择单个或多个索引库;
• 自动匹配:可根据日志类型自动筛选匹配索引库
高级筛选 筛选条件 选择索引库已解析字段字段值,通过筛选字段对索引数据进行过滤,多个筛选条件可通过 AND 或 OR 进行逻辑组合添加
2. 完成上述参数配置后,点击【预览数据】可预览已搜索出的数据源日志数据信息,如下所示:

3. 点击【下一步】进入数据目的地页面,配置数据源数据需流转至的目的地参数,如下所示:
• 新建 Topic:输入需创建的 Kafka Topic 名称,如下所示:

注意:新建 Topic 需满足以下要求:
1. Topic 不允许为空或重名;
2. 可输入英文或数字,可包含字符"-" "_"  "."
3. Topic 可输入 1~32 个字符。

已有Topic:可选择系统内已存在的Topic,如下所示:

4. 点击【下一步】,进入任务设置页面,配置参数如下:
元素名称 元素说明
*任务名称 设置通用数据流的任务名称
*任务计划 任务执行计划类型分为 2 种:
• 固定频率:设置任务执行的时间间隔,默认 4 小时执行一次;
• 固定时间:设置任务执行的固定时间,用于定义固定执行时间点,默认每天 00:00 执行一次,可自定义每天或每周周几执行
*任务生命周期 设置任务执行的结束时间,默认 8 天未检测到新的数据将结束数据流任务
5. 点击【下一步】进入检查页面,检查确认通用数据流配置参数,点击可跳转至对应页面修改配置参数,如下所示:

6. 点击【完成并提交】跳转至完成页面可以进行查看列表添加更多任务操作,如下所示:
• 查看列表:点击可跳转至数据流列表页面查看任务;
• 添加更多数据:点击可再次新建数据流任务。