疫情期间，在线教育、在线办公需求持续井喷，钉钉作为很多企业首选的在线办公软件，用户量激增，特别是钉钉视频会议、直播的需求随之飙升。同时，钉钉为了响应教育部门“停课不停学”的号召，宣布老师们可以免费试用钉钉在线课堂。

流量如洪流般涌入钉钉，一场资源扩容的技术挑战拉开了帷幕。中小学生集体对钉钉展开了五星分期与在线写歌“泄愤”的策略，钉钉本钉不得不在线求饶。而在大战间隙，一声感叹传出：

流量这么大，钉钉为什么不崩？

从1月28日开始，钉钉音视频会议、直播的访问流量倍数级增长。作为一个在云上成长起来的产品，钉钉开启了在阿里云的资源扩容之路，满足了用户在家办公及在家上课的需求，保证了用户良好的体验，钉钉如何做到的？

如此大型的扩容，面临着两大困境：效率与资源供应

人工扩容困境：效率低下

时间太短
面对流量暴增，留给钉钉技术团队时间只有几天。从1月29日起，钉钉团队就已在阿里云上24小时开始全力扩容，截止2月2日，从最初的2W vCPU扩容到3W vCPU，仅做到了数倍扩容，还远未达到业务需求。

购买与配置非常复杂
钉钉的系统架构包含多种资源，不同于单一的云服务器ECS服务集群，还包含SLB、MongoDB、Redis、EIP等产品。这些资源都需要一个个购买，其之间的关系也需要技人工自行配置。

人工部署效率低、失误率高
钉钉用户群量级大。如果人工部署集群，一个人部署1个集群需要1小时左右，同时也只能操作3-4个集群，还需要大量的配置操作，很容易失误。
部署复杂度高。集群的服务能力自闭环，支持无限扩展，但也会相应提升部署复杂度，而这次扩容涉及8个地域、16个可用区，传统部署方式扩容场景效率低下
大规模集群管理难度大。需要快速扩容近千集群，才能满足几亿人在家办公及学生在家上课的需求。当资源上千后，就很难管理资源之间的关系了，更何况超百万的资源规模。
人工部署，容错率比较差，排查困难。集群之间经常出现偏差，某个集群的SLB监听端口是300，另一个集群是3000，出现问题很难排查。
除却以上困难，建立和运维如此巨大的集群规模还会带来更多的技术挑战。

利用资源编排服务ROS，实现快速自动部署

早在2月2日流量洪峰带来之前，钉钉就通过阿里云的资源编排服务（Resource Orchestration Service，简称 ROS）提高集群部署效率、帮助其快速扩容。而这款服务不负重托，帮助钉钉在短短2小时内新增部署了超过1万台云服务器，这个数字也创下了阿里云上快速扩容的新纪录。

资源编排服务是一款帮助阿里云用户简化云资源创建，更新和删除的自动化服务。其通过资源栈 (Stack) 这种逻辑集合来统一管理一组云资源（一个资源栈即为一组阿里云资源）。

利用资源编排服务，云资源的创建、删除、克隆等操作，都可以以资源栈为单位来完成。在 DevOps 实践中，资源编排可以轻松地克隆开发、测试、线上环境；同时，也可以更容易实现应用的整体迁移和扩容。

一、定义资源模板
ROS帮助钉钉快速创建了描述其所需要用到的阿里云资源（如 ECS 实例、数据库实例等）的模板，以定义它的集群架构。ROS提供可视化编辑器能力，可自动可使用的模板。模板完成后，ROS将自动地创建并配置这些资源，即可实现基础设施即代码（Infrastructure as Code）的理念。

二、模板解析与执行
当ROS接收到用户创建资源栈的请求时，在执行创建前，首先会对模板进行解析。解析包括语法检查、参数校验、依赖分析等。
依赖分析就是分析出资源间的依赖关系，目的有两个：
• 保证资源创建的正确性：被依赖资源创建完成后才会创建依赖资源。
• 提供并行化创建的能力：无依赖关系的资源可以并行化创建。
模板解析完成后，ROS会按照依赖关系创建资源，只有所有前置资源完成创建，后面的资源才会开始创建，类似状态机的机制。
该资源模板可以快速地重复部署，尤其多地域、多可用区部署的情况；同时也可以减少环境之间的偏差，将部署过程和结果标准化，减少因为环境偏差引入的系统问题。

总结

钉钉使用资源编排服务ROS，扩容效率就提升了100倍。阿里云陆续为钉钉完成了10万台云服务器的快速扩容和部署，创下了阿里云上快速扩容的新纪录。

目前ROS已经拥有平均每分钟1个集群的扩容效率、每天超百万vCPU弹性能力。未来，可以预见到，疫情结束后，数百万资源回收释放也将是一个浩大的工程。资源编排服务ROS具有一键销毁功能，自动回收集群内所有资源，避免繁琐操作及遗漏。

弹性是云计算最大的优势，也是云计算对整个社会提供的普惠和便利，而阿里云弹性计算资源编排服务ROS作为阿里云上原生的自动化编排部署服务，让云计算的弹性发挥到极致，为钉钉提供了强有力的支持，让钉钉成为使用最频繁最流畅的平台。