容器开启数据服务之旅系列(四):Kubernetes QoS 助力在线运用与大数据离线运用的带宽控制和磁盘控制
容器开启数据服务之旅系列(四)
Kubernetes QoS 助力在线运用与大数据离线运用的带宽控制和磁盘控制
概述
本文是2018年大数据峰会上的一些分享,关于在线业务,离线业务在ACK(阿里云容器服务Kubernetes)的平台上通过对bandwidth, disk quota的灵活组合完成在线,离线业务场景的混合部署,来提高总体资源的使用率,以及带宽,本地盘资源的动态分配调整,来控制离线,在线资源水位。
离线大数据运算带宽控制
QoS for bandwidth
annotations: kubernetes.io/egress-bandwidth: 10M kubernetes.io/ingress-bandwidth: 5M
命名空间隔离和流量资源控制
ingress-bandwidth: 5M egress-bandw
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
容器开启数据服务之旅系列(三):Kubernetes QoS助力在线运用与大数据离线运用的混部
容器开启数据服务之旅系列(三) (三):Kubernetes QoS助力在线运用与大数据离线运用的混部 概述 本文是2018年大数据峰会上的一些分享,关于在线业务,离线业务在ACK(阿里云容器服务Kubernetes)的平台上通过对namespace, cgroup, quota的灵活组合完成在线,离线业务场景的混合部署,来提高总体资源的使用率,以及支资源限制动态分配调整,来伸缩离线部分的资源水位。结合HPA和资源监控,可以完成自动化的离线资源挤出。 在线业务Web应用/数据库 QoS class: Guaranteed:limit = request 离线业务 Spark/MapReduce/Deep Learning QoS class:Burstablerequest < limit 通过namespace的Guaranteed Qo
- 下一篇
2016企业协作及通信大会&企业云计算高峰论坛闭幕 精彩观点大盘点
第十八届CENCE企业协作及通信大会&第九届CCS企业云计算高峰论坛于6月15日落下帷幕,会中精彩内容不断呈现,还有“高大上”厂商登场,与会用户尽享了一场视听盛宴。以下来看小编为大家带来的劲爆内容大盘点。 通过OpenStack部署云计算 如何保持开源生态又不被厂商锁定 华为 云计算网络首席架构师申思 开源、开放、共享是IT产业发展的趋势,OpenStack正是以这样的核心理念让更多的企业,尤其是用户通过软件定义的方式参与到下一代数据中心的建设当中去。华为云计算网络首席架构师 申思在2016 CCS企业云计算高峰论坛上分享了基于OpenStack公有云网络云平台的实践,在谈到OpenStack时,申思表示,跨数据中心,集成之后仍然提供标准的OpenStack原生的能力,保持OpenStack开源的生态是用户的关键诉求。然而,单个OpenStack的管理规模有限,OpenStack在服务器和控制节点之间跑的是私有的RPC协议,这个协议很难管理,很难单独运维,单独控制,另外,升级故障定位,故障率很难隔离到一个具体的域,也很难保证发生故障的时候其他业务不受影响。为了解决这些问题,华为...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- CentOS7设置SWAP分区,小内存服务器的救世主
- CentOS7安装Docker,走上虚拟化容器引擎之路
- SpringBoot2编写第一个Controller,响应你的http请求并返回结果
- CentOS8安装Docker,最新的服务器搭配容器使用
- SpringBoot2整合Redis,开启缓存,提高访问速度
- SpringBoot2配置默认Tomcat设置,开启更多高级功能
- Docker安装Oracle12C,快速搭建Oracle学习环境
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- Springboot2将连接池hikari替换为druid,体验最强大的数据库连接池
- CentOS8,CentOS7,CentOS6编译安装Redis5.0.7