常见问题

1. 数据采集组件可以将数据采集到什么地方？

数据采集组件支持流式采集、批量采集两种方式，其中：

• 流式采集可以将数据采集到Kafka的Topic中；
• 批量采集可以将数据采集到KS3中；

2. 流式采集支持采集什么数据？

流式采集任务可将文件、外部Kafka、文件夹、自定义source、oracle数据库、MySQL数据库中的数据，实时采集至大数据云平台的Kafka中。

3. 批量采集支持哪几种采集方式？

• 批量采集可以通过“文件上传工具包”将用户客户端本地的多个文件、或选定文件夹下的所有文件推送至KS3；
• 批量采集还支持将FTP下的文件周期/单次拉取至KS3

4. 可以通过页面直接将文件上传文件至KS3中吗？

可以，进入批量采集 > 页面上传文件功能页面，可以将选中的多个文件一次性上传至选定的KS3目录下。可在采集开发页面将将本地文件上传至测试环境，可在运维中心 > 数据采集 > 生产任务 > 任务管理 > 批量采集中，将文件上传至生产环境。

5. 流式采集Agent可以部署在多个客户端吗？

流式采集Agent可以部署在多个客户端，部署启动后，可以在采集任务列表点击Agent列表查看部署Agent的客户端IP、hostname。

6. 启动流式采集任务后，如何查看哪些客户端正在进行采集任务？

• 启动采集任务后，可在任务列表通过【Agent存活数】字段查看存活的Agent数量；
• 点击采集任务列表的【Agent列表】字段，可查看具体的客户端情况，其中运行状态为【运行中】的客户端正在进行采集任务

7. 修改流式Agent采集的Agent信息后，没什么没有生效？

修改流式Agent采集的Agent信息后，需要在Agent列表中，选择需要升级的客户端，暂停采集任务后，点击更新按钮，进行更新。

8. 为什么将Agent停止后，没办法在页面重新启动？

Agent停止后，无法在平台页面上重启采集动作，需要在客户端上通过Agent进行启动。

9. 批量采集任务如何查看采集历史？

无论是通过页面上传的文件，还是通过上传工具上传的文件，或者从FTP拉取的文件，都可以通过批量采集任务列表中的【采集明细/拉取明细】功能，查看历史的采集/上传/拉取情况。