全部文档
当前文档

暂无内容

如果没有找到您期望的内容,请尝试其他搜索词

文档中心

流式采集

最近更新时间:2023-06-16 11:46:58

数据采集组件支持流式采集、批量采集两种方式,进入开发页面,默认展开流式采集页面(采集开发页面的任务运行在测试环境中)。

流式采集任务可将文件、外部Kafka、文件夹、自定义source、oracle数据库、MySQL数据库等数据,实时采集至大数据云平台的Kafka中,采集页面支持:任务增/删/改,支持采集工具下载、采集明细查询、数据投递等操作。
image.png

点击新建采集按钮,可创建采集任务,流式采集支持:
1.基于Agent的流式数据采集。
2.基于API的流式数据采集。
3.针对oracle、MySQL数据库的流式数据库采集(支持批量创建采集任务)。
image.png
流式采集任务大体可通过2种方式启动运行:

启动方式 使用范围 使用方式
Agent启动 流式数据采集、数据库采集 客户端部署并启动Agent
API启动运行 流式数据采集 通过调用API启动流式采集任务
文档导读
纯净模式常规模式

纯净模式

点击可全屏预览文档内容
文档反馈