视觉中国：基于容器云的同城双活微服务架构上云实践-低调大师

视觉中国：基于容器云的同城双活微服务架构上云实践

2017-02-15 771

本文正在参加“最佳上云实践”评选，来给我们投票吧：https://yq.aliyun.com/activity/158（编号7）

视觉中国集团（Visual China Group）创立于2000年6月，是中国领先的视觉影像产品和服务提供商。视觉中国集团是以“视觉创造价值，视觉服务中国”为愿景的A股唯一互联网文化创意上市公司（股票代号000681，股票简称：视觉中国）。视觉中国集团以“视觉内容与服务”、“视觉社区”和“视觉数字娱乐”三大业务板块为核心，拥有中国最大的视觉内容互联网版权交易平台，同时为国内的主题公园、城市综合体提供领先的数字娱乐整体解决方案。旗下包括华盖创意(Getty Images China)、汉华易美(China Foto Press)、东星娱乐（TungStar）、视觉ME社区（shijueme）、艾特凡斯（Advance）等业界著名品牌。集团拥有近万名签约摄影师和艺术家，并同海内外数百家图片社、影视机构、版权机构广泛合作，为媒体、企业主、广告公司等各类客户提供专业的图片、影视、音乐、特约拍摄、创意众包、视觉化营销等一站式服务。

选择云平台

视觉中国集团目前有分布在北京市各区的5个机房，我们的应用分布在这五个机房，数据间调用复杂且低效，运维维护成本高，每年的预算更是给企业带来一定的负担。为了摆脱这种模式我们决定云化，考察了腾讯云，华为云，ucloud等厂商，最后选择了更能切实解决我们问题且更值得信赖的阿里云平台。

我们采用了基于阿里容器云的同城双活微服务架构（consul+template+registrator），这样既能保证服务的高可用，也在CI,CD方面有所作为。使用到的产品有ECS,RDS,OSS,REDIS,消息通知服务，DATAV，QUICKBI，切图服务，RAM，容器云，云盾，SLB等十几种。

迁移上云

我们首先进行线下实体机房的微服务的搭建及测试，确保服务可用后进行云化的考量。整个应用迁移过程分为几个步骤：

阿里云资源申请。包括ecs，rds及oss等
容器云测试。简单搭建几个docker测试可用性
部署微服务。基于consul+template+registrator进行部署
代码部署。把jar包等通过jkenins进行部署
功能测试。
性能测试。
灰度发布。A/B test
部分应用迁移。
观察期
整体业务上线
观察期
迁移完毕

整体交付完成之后，我们的CI、CD基本上做了实践，研发发布代码无需经过运维干涉，自动发布，自动部署一键完成。

云端架构解析

架构要点解读：

容器集群是Region级别的服务，集群内可以包含多个可用区的ECS。
容器服务支持将同一个服务的容器调度在不同的可用区（zone）里，这是通过编排模板中的availability:az=xx标签来实现，具体参考：https://help.aliyun.com/document_detail/26018.html?spm=5176.doc26086.6.149.VT2kDs
SLB本身具有跨机房高可用特性，使用主、备在不同可用区的SLB类型即可。

整体架构就是基于容器云的同城双活架构，其实我们还有异地灾备。

交付采取镜像的交付方式，gitlab上传代码后通过jenkins进行打包操作，镜像交付到开发环境，功能验证没问题后，gitlab合并代码到test环境镜像交付后进行test环境的功能及性能测试。

最后将镜像推送至生产环境，生产环境采取双consul多数据中心模式，可用区A连接位于A区的consul master，同时将注册信息同步至位于可用区B的consul master，这样保证多区的微服务集群高可用。

两个区共用基础资源，RDS通过DTS同步至测试环境，测试环境和dev环境共用一套RDS。我们的架构在满足持续交付，持续部署的同时也满足了高可用的需求，每个微服务都是集群，这样基于容器层，ECS层，consul层，微服务层，任何节点出现问题对用户都是不可见的，实现了高可用。

上云前后分析对比

成本上可以做到有效的控制，随时做到服务的升降级。
阿里云帮助我们实现了故障主机的实时迁移，保障了业务的可用性，运维也比较省心。
在安全方面基于云盾和先知等产品的安全防护可以做到多层次的保障，极大提高了我们的服务安全性。
监控方面也很细致和全面，支持自定云完全满足我们的需求。成本方面可以随时关注费用中心，自行进行分析。
效率方面，因为是基于容器云的微服务架构，这方面也有非常大的改善。

以上几点任何一点在传统机房的模式下想做到全面和高效都是比较困难的，这也是我们为何进行云化的原因。

上云遇到的问题及解决方法

遇到的问题还是比较多的，我列举几个典型的问题。

中美oss同步大文件有数据重传问题及日常传输方案。稳定性建议采取高速通道，日常传输采用multipart分块实现
云端支持批量上传数据的压缩及打包下载解压缩功能。通过udf实现
oss子账户授权后只能看到自己目录内容。通过ossfs实现
跨境oss数据接收后无法确实该删除的文件。通过跨境消息通知机制实现
跟进不同的图片主题进行切图参数的相关匹配。通过智能识图完成
数据大屏展示。通过datav和quickbi实现
ddos攻击防护。通过高防ip及waf防火墙实现
容器云日志采集和查看。通过sls实现

微信关注我们

原文链接：https://yq.aliyun.com/articles/69648

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

阿里云oss的maven上传插件

阿里云oss上传插件，用于上传cdn文件（js、css、图片等） example1, 上传源码路径 <plugin> <groupId>com.fengjx.maven.cdn</groupId> <artifactId>maven-cdn-alioss-plugin</artifactId> <version>1.0.0</version> <configuration> <endpoint>http://oss-cn-shenzhen.aliyuncs.com</endpoint> <accessKeyId>xxxxx</accessKeyId> <accessKeySecret>xxxxxx</accessKeySecret>  <bucketName>bucketName</bucketName> <!-- oss路径前缀 --&g...

2017-02-16

560

阿里云用户在最初选择上云的过程中面临着选产品、做架构、安全、实施等方面的技术难题；选择阿里云产品，ECS、RDS、安全产品，面临着如何搭建服务器、维护服务器、服务器安全，被黑网站的情况在技术服务商来说也司空见惯，所以寻找一家云市场服务商做技术服务是非常必要的。很多客户认为自己不懂技术，害怕找服务商无法描述清楚需求，为此阿里云帮助中心提供大量搭建服务器教程，可作为参考，了解一些技术名词，由服务商在云端为您完成从网络到操作系统，再到运行环境，应用程序、网站调试，安全防护等工作。Windows用户许多场景会需要搭建域服务器，企业站迁移需要网站搬家，相比本地服务器搭建，云服务器更轻松，维护更便捷；相比自己搭建服务器，云市场的服务商更专业、效率更高、经验丰富、安全性更高，云端架构更节约成本、更安全。更有越来越多的程序员将svn服务器搭建 C

2017-02-16

525

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。