解析阿里云分布式调度系统伏羲-低调大师

解析阿里云分布式调度系统伏羲

2017-03-20 714

云计算并不是无中生有的概念，它是将普通的单台PC的计算能力通过分布式调度的软件连接起来。其最核心的问题是如何把100台、1千台、1万台机器高效的组织起来，灵活的进行任务调度和管理，从而使得可以像使用台式机一样使用云计算。在云计算中，最核心的模块是分布式调度，它好比于云计算的中央处理器。目前，业界已存在多种分布式调度实现方案，如伏羲、Hadoop MR、YARN、Mesos等系统。

阿里云伏羲

伏羲系统是在前人的基础上进行了一系列的改造，首先与YARN和Mesos系统类似，将资源的调度和任务调度分离，形成两层架构，使其具备以下优势：

（1）规模：两层架构易于横向扩展，资源管理和调度模块仅负责资源的整体分配，不负责具体任务调度，可以轻松扩展集群节点规模；

（2）容错：当某个任务运行失败不会影响其他任务的执行；同时资源调度失败也不影响任务调度；

微信关注我们

原文链接：https://yq.aliyun.com/articles/72526

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

2017-03-21 00:00:00

NASA计划被说口出狂言？阿里用开源证明技术实力

NASA计划被说口出狂言？阿里用开源证明技术实力前几天，马云在阿里巴巴的技术大会上称要启动代号“NASA”的科技行动计划，吃瓜群众纷纷表示“what？科技版NASA？阿里不是搞电商的吗？”你看，不知道了吧，其实阿里的真实身份是一家被电商光芒掩盖了的——科技公司！所谓“少年强则中国强，开源强则技术强”，目前，国际上通用的科技公司衡量标准就是开源的态度与能力，而阿里目前的开源能力，说是国内第二，估计没人敢说自己是第一。很多人也许会有疑问，开源是什么？为什么开源强技术就强？凭什么说阿里的开源能力很强？今天我们就来解开层层疑云。所谓开源，用“说人话”的方式来讲，就是和别人共享你的基础代码，这样既给他人调试使用代码的机会，也能让他们帮助你发现代码中的bug并及时修正。目前像Google、苹果、微软、Facebook……所有你能说出来的国际科技巨头都在积极拥抱开源社区和开源技术，最重要的原因就是只有成功的运行在无数种场景之下，才能更好的证明和锤炼一项技术本身。这也是我们说开源强则技术强的根本原因。在国内，阿里在开源这件事情上堪称“劳模”。早在淘宝业务发展初期，阿里就采用了大量开源技术；从2...

527

2017-03-21 00:00:00

201703深圳云栖大会Workshop-云盾WAF快速入门

目标熟悉Web应用防火墙的架构配置目标站点接入WAF 测试精准防护和日志检索功能 WAF的接入和防护架构 WAF采用反向代理的接入架构，通过修改防护域名的DNS解析到WAF而将流量牵引到WAF，通过各种防护模块过滤掉恶意流量后，再把正常请求转发回源站。配置接入WAF 登录阿里云控制台，找到云盾->Web应用防火墙->域名配置，输入相关的域名及源站信息，并点击“添加域名”按钮：注意事项：支持配置泛域名，如*.aliyundemo.cn，可以匹配相关的二级域名。当同时配置泛域名和精确域名时，转发和防护策略匹配顺序以精确域名优先如果有HTTPS站点，务必勾选HTTPS，同时建议勾选HTTP，以应对HTTP跳转等问题，同时需要在稍后上传源站证书和密钥（实验中我们只勾选HTTP）源站IP可以支持最多20个，WAF会做负载均衡和健康检查，详情见“源站IP负载均衡” 如WAF前面还有CDN、高防等七层代理，务必勾选“是否已使用代理”，这样才能取到客户端真实IP，不然看到的都是上一级代理的IP 添加好域名后，会弹出选择解析方式的弹窗，为了更好的演示接入原理，这里选择手动修改：...

608

资源下载

更多资源

Mario，低调大师唯一一个Java游戏作品

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Apache Tomcat7、8、9（Java Web服务器）

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

Eclipse（集成开发环境）

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

Java Development Kit(Java开发工具)

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。