容器开启数据服务之旅系列（三）

（三）：Kubernetes QoS助力在线运用与大数据离线运用的混部

概述

本文是2018年大数据峰会上的一些分享，关于在线业务，离线业务在ACK（阿里云容器服务Kubernetes）的平台上通过对namespace, cgroup, quota的灵活组合完成在线，离线业务场景的混合部署，来提高总体资源的使用率，以及支资源限制动态分配调整，来伸缩离线部分的资源水位。结合HPA和资源监控，可以完成自动化的离线资源挤出。

在线业务Web应用/数据库

QoS class： Guaranteed:
limit = request

离线业务 Spark/MapReduce/Deep Learning

QoS class：Burstable
request < limit

通过namespace的Guaranteed Qo

微信关注我们

原文链接：https://yq.aliyun.com/articles/596041

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

2018-05-23 00:00:00

Docker - 通往新世界的大门

引言相信很多技术同学在开发时都会使用虚拟机，配置好一个开发环境，以后使用时只需要启动虚拟机就好了。但虚拟机动辄几个GB，大一点儿的甚至几百个GB，而且只要其中任意的虚拟机文件损坏，整个虚拟机就没办法启动了。你可能说应该经常备份，这的确是个好主意。但有没有更好的办法呢？今天钢哥就带着大家了解一下Docker（容器），看看它是否比传统的虚拟机更适合我们。什么是容器? 顾名思义，容器就是用来装东西的。我们平时喝水的杯子就是容器，只不过杯子这个“容器”是用来装水的，而我们这里的容器装的是应用程序。容器有什么特点？自包含性：它打包了应用程序的所有依赖，可以直接运行；可移植性：容器可以在几乎任何地方以相同的方式运行，这就确保了在开发、测试和生产环境都可以拥有完全一样的运行环境；相互隔离性：多个容器间默认是相互隔离的，即使运行在同一台主机上；轻量级特性：秒级启动，占用资源少；容器与虚拟机有什么区别？很多同学会觉得，容器能做的事虚拟机也能做啊，到底有什么区别呢？虚拟机的缺点占用资源多；冗余步骤多；启动慢；容器的优点占用资源少；提及小；启动快；下面是 Docker 官...

528

2018-05-23 00:00:00

容器开启数据服务之旅系列（四）：Kubernetes QoS 助力在线运用与大数据离线运用的带宽控制和磁盘控制

容器开启数据服务之旅系列（四） Kubernetes QoS 助力在线运用与大数据离线运用的带宽控制和磁盘控制概述本文是2018年大数据峰会上的一些分享，关于在线业务，离线业务在ACK（阿里云容器服务Kubernetes）的平台上通过对bandwidth, disk quota的灵活组合完成在线，离线业务场景的混合部署，来提高总体资源的使用率，以及带宽，本地盘资源的动态分配调整，来控制离线，在线资源水位。离线大数据运算带宽控制 QoS for bandwidth annotations: kubernetes.io/egress-bandwidth: 10M kubernetes.io/ingress-bandwidth: 5M 命名空间隔离和流量资源控制 ingress-bandwidth: 5M egress-bandw

528

资源下载

更多资源

优质分享Android(本站安卓app)

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario，低调大师唯一一个Java游戏作品

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Java Development Kit(Java开发工具)

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。

Sublime Text 一个代码编辑器

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。