京东如何从OpenStack迁移至Kubernetes-低调大师

京东如何从OpenStack迁移至Kubernetes

2017-07-03 543

中国最大电商公司之一的京东，最近分享了自己通过Kubernetes对基于应用程序容器的基础架构进行革新，取代OpenStack托管的IaaS基础架构过程中所获得的经验。本次迁移同时涉及内部网络组件，借此可将资源利用率提高30%。

在采用应用程序容器技术之前，京东的基础架构部署经历了两个阶段：物理机（2004 – 2014）以及操作系统容器（2014 – 2016）。第一阶段主要使用手工管理的裸机硬件，但这一阶段遇到了很多问题，例如上线前的准备时间过长（从分配到应用程序上线约需要一周时间），缺乏隔离机制，资源利用率不足，调度机制不够灵活。计算机失败后往往需要花费数小时迁移应用，且缺乏自动缩放能力。工程团队针对日志收集、自动化部署、编译和打包，以及资源监视等常用任务开发了内部工具。

京东基础架构的第二阶段开始采用容器技术。当时使用了操作系统容器，这意味着需要将现有应用程序和部署架构整体迁入容器中。当时的容器可以看作是对他们原本采用的物理机进行精简后一种运行速度更快的“物理机”，并未采用已经完全成熟的“容器哲学”。

尽管如此，通过采用容器技术，他们已经在第二阶段从时间和资源的使用率方面获得了巨大的收益。当时他们使用OpenStack作为编排层，并使用nova Docker驱动实现容器的管理。该团队选择Docker作为自己的容器平台，并逐渐向其中增添新的功能。所有应用陆续迁移到容器中，借此将计算资源请求的实现时间从原本的一周缩短至几分钟。应用程序的平均部署密度和物理机的利用率提升了三倍。该团队还针对部署任务构建了统一的API，公司内部将其称之为JDOS（JD Datacenter Operating System）1.0。

他们基于OpenStack的平台通过一个群集承载了大约4000至10000个计算节点。截至2016年11月，京东团队共运行了将近150,000个容器。这个平台帮助他们顺利度过了两次大流量在线促销活动，包括2016年双十一活动，共完成大约3千万个订单。

在第二阶段迁移至容器技术后，该工程团队已经可以对部署架构进行改动，使用容器作为基本的部署单位。公司内部将其称之为JDOS 2.0。这个方法关注的并非基础架构本身的管理，而在于可感知应用程序的容器管理。他们的平台设计包含两个抽象：系统和应用程序。一个“系统”可包含多个“应用程序”，每个应用程序可包含多个提供相同服务的Pod。一个系统对应着一个Kubernetes名称空间。

其他组件还包括部署流程和容器化的DevOps工具，这些内容均部署在Kubernetes管理的平台上，此外还包括Gitlab、Jenkins、Logstash、Harbor、Elasticsearch，以及Prometheus。部署过程中，源代码和Dockerfile会被推送至代码库和Jenkins构建。Jenkins被配置为主从模式，其中从节点负责构建和打包应用程序，此外还有一个类似的节点负责构建容器映像。他们使用了Harbor这一开源的Docker注册表存储所创建的映像。

图片来源：http://blog.kubernetes.io/2017/02/inside-jd-com-shift-to-kubernetes-from-openstack.html

为了在Kubelets和OpenStack Neutron之间实现更好的集成，京东根据Container Networking Interface标准自行开发了一个名为Cane的解决方案。在创建、删除或修改Kubernetes负载均衡器后，Cane可以通知Neutron负载均衡即服务（LBaaS）系统。此外他们通过在Cane内部运行的Hades组件为Pod提供内部的DNS解析服务。

本文转自d1net（转载）

微信关注我们

原文链接：https://yq.aliyun.com/articles/139446

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

有望成为Docker 2.0版，Hyper获君联、真成基金数千万元A轮融资

近日，Hyper对外宣布获数千万元A轮融资，投资方为君联资本、金沙江、真成基金。Hyper成立于创立于2015年，并于同年9月获得了云天使基金和真格基金的200万美元的天使轮投资。 36氪曾报道，Hyper主要解决的是Docker隔离性不强的问题。因为无法对所有应用进行隔离，所以在公有云上使用Docker时，用户必须要先开一堆虚拟机，然后再让Docker在虚拟机上运行，以此来保证用户数据和业务的安全。因为虚拟机的启动有时也要花上数十秒，那这样一来，Docker启动速度快，轻量化的优势也就不能完全发挥。而Hyper便是近一两年来新出现的一种容器技术，可以在Hypervisor上，无需安装完整操作系统，直接运行Docker镜像的运行引擎。在Hyper技术的开源者之一赵鹏看来，Docker是让Docker镜像运行在Linux容器内，虚拟机是拿KVM去跑这个虚拟机的镜像，而Hyper则是把两者错开了，用虚拟化的技术去运行Docker的镜像。这样的好处在于既能通过隔离来保证业务和数据的安全，又能保持Docker快速、轻量化的特点。当然，Hyper除了可隔离、安全外，同时因为它是可以直接运行...

2017-07-04

554

作为西安地区信息化建设的主力军，多年来，中国电信西安分公司（以下简称西安电信）积极响应国家号召，勇于担当企业服务信息化发展的社会责任，发挥电信综合信息服务实力，先后参与了西安市电子政务网、天网工程、数字城管等多个政府信息化项目建设，为助力西安市政府新型智慧城市建设提供全方位的网络信息化支撑。打造精品网络助力智慧城市建设随着4G网络的加速普及，近年来，西安电信积极打造精品网络，力求为用户提供覆盖更广、容量更大、速率更快、安全可靠的天地空立体通信网络。2015年以来，西安电信有力推进网络提速降费，通过光网建设、技术优化，将4M及以下用户免费提速至8M、30M、50M、100M，提速降费惠及用户136万，宽带接入平均速率提升了168%，主流宽带资费下降30%，两年惠及新增用户超过50万。经过两年多的推广，4G逐步走入千家万户。据了解，目前天翼4G信号已覆盖全市城区、县城、4A景区和经济发达乡镇。市区、县城主要移动网络指标在各运营商中领先，通过流量不清零、长市漫同价、加大流量赠送等，流量单价下降40%。多年来，西安电信一直坚持打造光宽精品网络，建设光网城市，大力开展惠民服务，目前全市有...

2017-07-04

553

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。