常见问题

最近更新时间:2019-12-20 14:15:47

  1. 数据采集组件可以将数据采集到什么地方?

数据采集组件支持流式采集、批量采集两种方式,其中:

  • 流式采集可以将数据采集到Kafka的Topic中;
  • 批量采集可以将数据采集到COS中;
  1. 流式采集支持采集什么数据?

流式采集任务可将文件、外部Kafka、文件夹、自定义source、oracle数据库、MySQL数据库中的数据,实时采集至大数据云平台的Kafka中。

  1. 批量采集支持哪几种采集方式?
  • 批量采集可以通过“文件上传工具包”将用户客户端本地的多个文件、或选定文件夹下的所有文件推送至COS;
  • 批量采集还支持将FTP下的文件周期/单次拉取至COS
  1. 可以通过页面直接将文件上传文件至COS中吗?

可以,进入“批量采集”-“页面上传文件”功能页面,可以将选中的多个文件一次性上传至选定的COS目录下。可在采集开发页面将将本地文件上传至测试环境,可在“运维中心-数据采集-生产任务-任务管理:批量采集”中,将文件上传至生产环境。

  1. 流式采集Agent可以部署在多个客户端吗?

流式采集Agent可以部署在多个客户端,部署启动后,可以在采集任务列表点击“Agent列表”查看部署Agent的客户端IP、hostname。

  1. 启动流式采集任务后,如何查看哪些客户端正在进行采集任务?
  • 启动采集任务后,可在任务列表通过“Agent存活数”字段查看存活的Agent数量;
  • 点击采集任务列表的“Agent列表”字段,可查看具体的客户端情况,其中运行状态为“运行中”的客户端正在进行采集任务
  1. 修改流式Agent采集的Agent信息后,没什么没有生效?

修改流式Agent采集的Agent信息后,需要在Agent列表中,选择需要升级的客户端,暂停采集任务后,点击“更新”按钮,进行更新。

  1. 为什么将Agent停止后,没办法在页面重新启动?

Agent停止后,无法在平台页面上重启采集动作,需要在客户端上通过Agent进行启动。

  1. 批量采集任务如何查看采集历史?

无论是通过页面上传的文件,还是通过上传工具上传的文件,或者从FTP拉取的文件,都可以通过批量采集任务列表中的“采集明细/拉取明细”功能,查看历史的采集/上传/拉取情况。

金山云,开启您的云计算之旅

免费注册