分布式调度中间件Elastic-Job 2.1.0发布：Cloud Native里程碑版本-低调大师

分布式调度中间件Elastic-Job 2.1.0发布：Cloud Native里程碑版本

2017-07-04 676

Elastic-Job 是什么？
Elastic-Job是一个开源的分布式调度中间件，由两个相互独立的子项目Elastic-Job-Lite和Elastic-Job-Cloud组成。

Elastic-Job-Lite为轻量级无中心化解决方案，使用jar包提供分布式任务的调度和治理。 Elastic-Job-Cloud是一个Mesos Framework，依托于Mesos额外提供资源治理、应用分发以及进程隔离等服务。

项目已开源接近2年，目前为止已更新发布16次。Elastic-Job已在分布式作业领域占有一席之地，明确采纳的公司已超过50家，未收录的采纳公司不计其数，更有多个开源产品衍生自Elastic-Job。

项目的开源地址：

https://github.com/dangdangdotcom/elastic-job

Elastic-Job-Lite和Elastic-Job-Cloud的定位是什么？
Elastic-Job-Lite定位为纯粹的作业中间件，仅关注分布式调度、协调以及分片等核心功能，将作业部署、资源分配等功能交于Mesos或Kubernetes处理；而Elastic-Job-Cloud提供一体化私有云服务，将分布式调度、作业部署、资源分配、监控、日志处理等提供完善的解决方案。

从功能上看Elastic-Job-Cloud更加完善，但依托于Mesos，使用复杂度较高，不易整合进公司现有系统，因而更加轻量级的Elastic-Job-Lite在实际使用中更受青睐。

之前版本的Elastic-Job-Lite有什么缺失？
主要缺失就是对Cloud Native的支持。原来的Elastic-Job-Lite是面向静态场景的，简单说就是每台作业服务器只能部署一个作业名称相同的作业实例，而当这个作业实例下线时，该作业服务器则显示为下线状态。这对于使用物理服务器的场景来说比较适合，而对于使用Docker的场景，则不太友好，原因是：

每次作业上线服务器IP可能产生变化，旧的服务器IP不会再使用，从而产生垃圾数据。Docker的治理系统可以在一台物理服务器上启动多实例，而仅支持单服务器单实例的Elastic-Job使用起来诸多不便，需要Docker的治理系统额外配置。Elastic-Job 2.1.0版本是如何做到Cloud Native的？
新版本支持单服务器跑任意多的相同作业实例，原作业实例标识由IP地址替换为作业启动瞬时产生的UUID。在新的Cloud Native架构下，作业物理服务器概念大幅弱化。为了向前兼容，作业物理服务器仅包含控制服务器是否可以禁用这一功能。为了更加纯粹的实现作业核心，作业物理服务器统计和操作功能未来可能删除，可下放至容器治理部署系统。

使用新增加的运行实例概念全面替换原服务器概念，Elastic-Job-Lite与容器治理系统的对接由原来的服务器维度转变为运行实例维度，每个运行实例都是动态的，会随着作业下线而消失。

习惯根据服务器静态分配作业的使用者也不用太过担心新版本带来的变化，服务器信息以另外一个维度可选的存在于作业管理信息中，使用者仍然可以继续使用服务器静态部署的方式。

通过这次修改，Elastic-Job-Lite已经可以非常容易的对接Mesos + Marathon以及Kubernetes，相信使用者可以非常轻松的搭建一个深度定制版的作业私有云。

Elastic-Job 2.1.0版本还有哪些关键更新？
Elastic-Job 2.1.0版本是仅针对Elastic-Job-Lite进行全面提升。它主要包含以下4方面的提升：

单服务器可运行任意多的相同作业实例。Cloud Native，这里不再细说。自修复能力使稳定性进一步提升。之前的Elastic-Job经过一年多的洗礼，稳定性已然不错，但是分布式场景由于环境复杂，很难完全通过正向的方式保证每个节点间的状态完全同步。而Elastic-Job原来的版本在网络不稳定的情况下，可能发生主节点选举卡死，或某个分片不运行的情况，可以通过重启应用修复。新版本的Elastic-Job-Lite使用异步线程，定期（可配置时间间隔）检测集群中不正确的状态，以反向检查的方式查找并自动修复分布式的不一致，为分布式稳定性的完善增加了最后一块拼图。作业操作梳理。新版本将操作分为作业、实例、分片以及服务器4个维度，去除了容易混淆的暂停操作，对禁用功能进一步的增强，可以从各个维度控制整体作业或独立分片。控制台界面提升。完全重写了控制台界面并且增加了事件追踪界面展示。新界面提供更加清新的用户体验，甚至包括主题皮肤切换，欢迎大家亲自体会。Elastic-Job 2.1.0版本与旧版本兼容么？
新里程碑版本做了如此大的修改和提升，那么从旧版本升级至新版本有哪些地方需要修改？相信很多老用户有这样的疑问。答案是：不需要做任何改动。

Elastic-Job 2.1.0虽然对数据的存储结构进行了调整，但完全兼容原有数据结构，并且API和配置并未改变，使用者可以平滑升级。

Elastic-Job 下一步要做什么？
当前的Elastic-Job已支持事件驱动，但并不完善。因此Elastic-Job下个功能将针对事件驱动进行提升，将其分布式“定时任务”中间件的定位彻底改变为分布式“任务”中间件。

另外还有很多功能需要继续完善，如作业依赖的支持等。

对于新手来说使用Elastic-Job 很难么？
Elastic-Job-Cloud对于新手来说使用起来并不太容易，需要对Mesos技术栈有一定了解。

Elastic-Job-Lite则非常简单，只需在pom.xml中引入Elastic-Job的maven坐标，并且参照在github上的example编写几行代码即可，唯一的外部依赖是Zookeeper。

最后，请允许我再重复一次，项目的开源地址：https://github.com/dangdangdotcom/elastic-job

欢迎使用、吐槽和提出建议。

本文转自d1net（转载）

微信关注我们

原文链接：https://yq.aliyun.com/articles/163752

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

公开仓库中Docker镜像的漏洞分析结果发布

Federacy的一名研究人员发布了一项报告，该报告分析了公开仓库中Docker镜像的漏洞。24%的镜像发现了明显的漏洞，其中基于Ubuntu的镜像漏洞最多，而基于Debian的镜像漏洞最少。这项研究扫描了133个公开Docker仓库中的91个，其中每个仓库都有一个添加‘latest’标记的镜像，底层的镜像是一个主Linux分发版本并且带有可运行的包管理器。这里，使用了一个修改过的vuls开源漏洞扫描器来扫描镜像。vuls是用Go语言编写的，支持Linux和FreeBSD。数据是通过Federacy内部构建的工具进行分析的。鉴于vuls还不支持Alpine和静态二进制文件，它们就从本次分析中排除了出去。计分是按照CVSS v2标准计算得出的。在扫描到的所有镜像中，其中的24%存在较为明显的漏洞，在这些漏洞中，11%的风险等级为高，13%的风险为中等，剩余的被视为潜在漏洞。扫描的Linux分发版本包括Ubuntu、Debian和RHEL。基于Ubuntu的镜像在严重漏洞总数上的占比最高（27%），而Debian则是漏洞最少的分发版本（8%）。但是，基础的Ubuntu镜像并未包含任何已...

2017-07-05

551

在高速运转的城市，视频监控在我们的生活中发挥着越来越重要的作用，让我们的安全多了一层保障。近年来，原有的模拟视频监控及模数混合组网的视频监控应用模式正在逐步被IP化、全高清的网络视频监控所取代，随着平安城市、智慧城市项目的建设发展，信息化建设对视频监控的存储与应用提出了新的要求。数据格式的升级与监控设备的增加，给传统视频监控存储带来压力可想而知。需求推动创新和发展，云存储的在安防监控领域的应用让问题迎刃而解。 2014年全球摄像头出货量达到5646万台，从社区、楼宇到金融银行、再从交通系统到大型平安城市的视频监控系统，我们几乎每时每刻都生活在摄像头的监控之下，以采用标准H.264压缩技术的高清网络摄像机为例，一部1080P高清摄像机，码流大约是8Mbps，24小时录像产生的数据量为84GB，30天录像数据量为2520GB，一年录像数据量为30TB，而全球监控设备产生的图像每天产生的视频监控数据量达160PB。而随着安防视频监控系统技术的进步和规模的增长对存储的要求也在发生深刻的变化，对存储系统的容量、扩展性、性价比、性能、管理性、稳定性等都提出了新的要求，传统的存储方式已经不能满足要求...

2017-07-05

579

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。