最近更新时间:2026-01-22 17:42:37
容器化部署 KMR on KCE 是基于云原生架构设计的轻量化大数据计算形态,利用容器平台将 Hadoop 组件镜像化运行,实现资源的按需调度与秒级弹性伸缩。KMR on KCE充分复用用户现有的容器集群,与在线业务共享资源池,通过“削峰填谷”最大化资源利用率。
用户可便捷选择所需的 KMR 版本,快速提交和释放作业,享受高效、灵活的大数据平台体验,保障稳定性的同时大幅降低成本,提升大数据处理的便捷性与易用性。
服务部署:在 KEC集群上自动安装 Spark/Flink 开源组件,容器内运行、镜像化交付
监控治理:基于 KEC 的标准化可观测与生命周期管理,降低异构集群维护成本
用户体验:同一套 KMR 平台同时支持KEC 与KCE 两种部署形式,灵活切换;作业级别可选 Spark/Flink服务,任务处理更高效
存算分离:存算分离架构,计算基于 KCE 弹性扩展,存储基于 KS3,天然解耦、按需伸缩
云服务器部署 KMR on KEC | 容器化部署 KMR on KCE | |
基础架构 | 在云主机KEC上部署和配置 Hadoop 集群 | 基于 Kubernetes容器集群,KMR服务镜像化运行 |
资源利用率 | 按整台服务器分配,资源独享 | 按容器/Pod 调度,作业级释放,资源利用率更高 |
弹性伸缩 | 虚拟机维度节点级扩缩容,分钟级响应 | 容器维度节点级扩缩容,秒级响应 |
运维成本 | 需独立运维 Hadoop 集群,安装、监控 | 标准化容器运维体系,镜像交付,依赖容器运维能力 |
存储与计算 | 支持存算一体、存算分离 | 存算分离 |
适用场景 | 长期运行、负载稳定的大数据批处理任务 | 负载波动大、弹性需求高的流批处理任务 |
成本计费 | KMR资源独享,收取KMR服务费 | 用户仅支付底层资源费用,免收KMR服务费 |
流批处理:以 Spark/Flink为核心的流批处理与建模作业,弹性拉起即用即停
离在线混部:在线业务与大数据任务共享 KCE 资源池,提高资源利用率
弹性扩缩容:大促、报表跑批等场景下,任务高峰期快速扩容,低峰期缩容回收,降低成本
临时性作业:一次性统计、临时 ETL 等无需常驻集群的任务,容器快速拉起运行,完成后自动释放资源
纯净模式
