容器开启数据服务之旅系列(三):Kubernetes QoS助力在线运用与大数据离线运用的混部
容器开启数据服务之旅系列(三) (三):Kubernetes QoS助力在线运用与大数据离线运用的混部 概述 本文是2018年大数据峰会上的一些分享,关于在线业务,离线业务在ACK(阿里云容器服务Kubernetes)的平台上通过对namespace, cgroup, quota的灵活组合完成在线,离线业务场景的混合部署,来提高总体资源的使用率,以及支资源限制动态分配调整,来伸缩离线部分的资源水位。结合HPA和资源监控,可以完成自动化的离线资源挤出。 在线业务Web应用/数据库 QoS class: Guaranteed:limit = request 离线业务 Spark/MapReduce/Deep Learning QoS class:Burstablerequest < limit 通过namespace的Guaranteed Qo