首页 文章 精选 留言 我的

精选列表

搜索[库存盘点],共7349篇文章
优秀的个人博客,低调大师

五大微控制器板特性盘点

要开始嵌入式开发,我们需要两个主要的东西,即开发板和IDE(集成开发环境)。微控制器开发板是一种印刷电路板(PCB),其电路和硬件设计用于促进某些微控制器板功能的实验。开发板与处理器,存储器,芯片组和板载外设相结合,如LCD,键盘,USB,串行端口,ADC,RTC,电机驱动器IC,SD卡插槽,以太网等,具有调试功能。这将使我们免于弄乱跳线和电路板的连接。微控制器板的规格是总线类型,处理器类型,存储器,端口数,端口类型和操作系统。这些用于评估嵌入式设备的程序,例如不同的控制器,家用电器,机器人,收银(PoS)终端,信息设备。微控制器开发板也称为单板微控制器。如今,开发单板微控制器开发套件非常简单和便宜。如此多的开源软件(IDE)可用于开发微控制器板以开发实时应用程序。本文主要讨论当下市场上的不同微控制器版之间的特性。 **基于DIY的微控制器板**DIY(自己动手)的微控制器板可以在家自制,你需要所有单独的电子和电气元件,如微控制器(Atmel,ARM,MSP等),组件基座和外部外围设备,如RTC,串口,LCD模块,键盘,触摸板等。现在所有这些组件都应该小心地焊接在PCB上。完成硬件设置后,必须选择合适的IDE来编程微控制器以开发所需的应用程序。 Arduino UNOArduino是最受欢迎的开源电子原型制作平台,用于创建交互式电子应用程序。其受欢迎的原因是,它有一个用于开发草图的开源IDE,基于“C”语言的简单语法,代码易于学习。Arduino UNO板包含支持微控制器所需的一切。Arduino UNO微控制器板对于绝对的初学者和专家来说非常熟悉。它应该被认为是第一个基于微控制器的开发板之一。Arduino UNO R3是基于ATmega328P微控制器的最简单,最强大的原型设计环境。 Raspberry Pi开发板树莓派开发板很小(就像信用卡计算机的大小。树莓派可以很容易地插入监视器,电脑或电视。此外,它使用标准的键盘和鼠标。即使非技术用户依赖它用于配置数字媒体系统和监控摄像头。Raspberry Pi在定制的Debian Linux上运行,名为Raspbian,用于安装不同的软件包,包括Node.js,Java,LAMP堆栈,Python等等。通过使用树莓派板,可以开发一台迷你电脑。这对学生非常有用。还可以启动weight wed服务器,因为它可以支持HTML,JAVA等所有编程语言。它甚至可以处理WordPress,因此您可以管理自己的博客/网站。基于树莓派的机器人技术在自动化行业中具有巨大的应用。使用raspberry pi开发IOT应用程序非常容易。 BeagleBone黑色开发板BeagleBone Black是流行的开源计算机之一。现在它具有内置的无线网络功能。利用与Octavo Systems的合作伙伴关系并在CadSoft Eagle中设计,BeagleBone Black Wireless是最容易使用和修改信用卡大小的物联网Linux计算机。BeagleBone Black是面向嵌入式应用程序开发人员的低成本,社区支持的开发平台。安装Linux的启动时间需要10秒,只需一根USB线即可在不到5分钟的时间内开始开发。 AdaFruit Flora开发板Adafruit Flora开发板的主要目标是开发可穿戴电子设备。它是一种磁盘形状,可缝合,兼容Arduino的微控制器,旨在开发出令人惊叹的可穿戴项目。最新版本的Adafruit Flora配备了微型USB和Neopixel LED,可轻松实现可编程性和测试。

优秀的个人博客,低调大师

大型网站架构演进的五大阶段盘点

一个创业公司起步时很可能就两台机器,一台Web 服务器、一台数据库服务器,在一个应用系统中集成了所有功能模块,但随着业务的发展、流量的增长,单应用远远不能满足业务需求。 下面我们一同来聊聊网站架构发展所经历的几次主要演进,包括:从PHP 到Java 的改造、分布式改造、无线化改造、中台的改造、国际化改造。 阶段一 从PHP 到Java 很多网站早期都是基于Linux+Apache+MySQL+PHP 架构的网站,从当时来看,这种非常流行的个人网站架构的确也非常匹配当时的发展状态。PHP 语言的特性是快速发布,从页面渲染到数据库访问,均可以在一个页面里全部搞定。 即使放到今天,这种架构仍然还有很多人在用,它的优点就是非常简单高效,但缺点也非常明显:扩展性和分布式不好,不适合企业级的、复杂业务逻辑的大规模协同开发。 随着网站的发展,大家觉得应该将PHP 切换到Java。为什么要切换到Java 语言呢?一般来说,企业选择开发语言会有如下考虑。 (1)语言本身的特性。每种语言开发出来都有它的特性和所适合的场景,像Python、PHP 这类脚本语言非常适合快速简单的开发方式,而Java 则比较适合构建复杂业务逻辑的企业级开发,但是开发效率会比PHP 要差一点。 (2)程序员队伍。企业选择何种开发语言,还要看市场上的人才队伍是不是足够,是不是有很高层次的人才。是否有高层次的人才,取决于当前的行业老大是不是也在用这种语言,比如当前的顶级互联网公司如果在用Java,那么自然这些公司的Java人才比较多,这样,他们的经验可以被快速复制到其他公司中。 (3)语言所对应的工具生态是否完善。一个语言是否有生命力,要看这个语言对应的生态工具是否完善,它的社区是否活跃。因为我们要用到各种工具,而我们也不可能自己去写每种工具,因此,是否能方便地利用开源工具,快速提升开发效率也是非常关键的。像现在很多大公司开源了很多Java 的中间件产品,这些中间件可以直接拿来使用,就不需要再重新开发了。 综合以上因素,电商网站选择Java 语言作为主要的系统开发语言是非常合适的。 从PHP 切换到Java 后,整个网站采用WebX+EJB+iBatis+JBoss+Oracle(后面又将EJB 改成Spring)的架构,但是随着业务量的不断增大,存储层的瓶颈暴露出来。 为了解决存储问题,就逐渐用上了非常昂贵的IBM 小型机、Oracle 的数据库以及EMC的高端存储(IOE);并对数据库做了分库的拆分,分布式缓存(Tair)也随之诞生,分布式文件系统TFS 开始出现,CDN 也慢慢建立了。 阶段二 分布式改造 所谓分布式改造,就是尽量让系统无状态化,或者让有状态的信息封装在一定范围内,以免限制应用的横向扩展。简单来说,就是即便某个应用的少数服务器“宕”掉,也不会影响整体业务的稳定性。 要实现应用的分布式改造必须先解决以下几个问题。 (1)把应用微服务化:即将大量粗粒度的应用逻辑拆小,做服务化改造。 (2)必须先建立分布式服务框架。必须具备分布式RPC 框架、异步消息系统、分布式数据层、分布式文件系统、服务的发现、注册和管理。 (3)必须要解决分布式Session 问题。 为了做业务的服务化改造,我们大量拆分了当时的业务系统,形成了商品中心、交易中心、用户中心、店铺中心。这些服务作为底层服务供上层的前台系统调用,此时的系统架构变成了下面的形式。 现在来看,系统的分布式改造为网站接下来5 年的发展奠定了很好的基础,整个网站的扩展性非常好。几乎每个初创企业都必须经历一次分布式化的改造,才能为企业的长期发展奠定基础。笔者前面提及的几个重要的中间件产品和关键的分布式Session 等技术在《深入分析Java Web 技术内幕(修订版)》一书中有详细的介绍,感兴趣的读者可以自行去学习了解。 阶段三 无线化改造 到了2013 年,无线技术已经非常火爆了。在此之前,无线的业务总是跟着PC 走,基本上是PC 做好后无线再复制一份,而且无线和PC 还不是同一个前台系统,导致一个功能要做两遍,并且无线部门的开发人员本来就不多。这些给业务的发展带来很多问题。因此2013 年底,启动了All in 无线项目,目标就是用一套系统、一套架构快速支撑多端的个性化,并在服务端做了很多模块化和组件化的改造。 随着无线技术的发展,我们也开始尝试一些新技术,最具代表性的就是Node。 Node 在业界很火,前端同学非常推崇,而且它也大幅提升了前端的开发效率和体验。 目前大家也多方尝试使用Node 技术,并且用在一些业务线上。但是,从今天来看,Node 并没有达到我们想象中的发展前景。这其中有多种原因,本书的后续章节会专门介绍网站的无线化改造实践,也将分享Node 在实际使用中的一些思考。 经过无线化改造的应用系统架构如图。 阶段四 中台改造 中台这个概念早期是由美军的作战体系演化而来,技术上的“中台”主要是指学习这种高效、灵活和强大的指挥作战体系。电商经过十几年的发展,组织已经庞大而复杂,业务不断细化拆分,也导致野蛮发展的系统越来越不可维护,开发和改造效率极低,也有很多新业务不得不重复造轮子,所以中台的目标是为了解决效率问题,同时降低创新成本。 阶段五 国际化 国际化一般会有两种思路:一种是一套原始代码部署到多个地方,各地的系统基本没有什么关联、保持相互独立,每个地方再根据本地实际情况做一些个性化的定制。一般来说,会精简原始代码,减少不必要的依赖。这种思路在一些跨国公司用得比较多,但是这个对技术要求比较低。 另一种思路就是我们所说的国际化,它主要是解决如何将一套系统部署到多地的问题。一般国际化有两个发展阶段:第一个阶段是在国内实现了交易的单元化;第二个阶段是实现了中美的跨国部署。 国际化的本质仍然是要解决以下的通用问题:多语言问题、多时区问题、数据路由问题、全球数据的同步与复制问题。 本文摘自《大型网站技术架构演进与性能优化》一书前言,作者许令波 ,电子工业出版社6月出版。 罗马不是一天建成的,能够支撑亿级交易量的大型网站也不是一蹴而就的。作者以一名亲历者的身份,阐述了一个大型网站在数年时间内从雏形成长为巨人时所经历的技术选型思考、方案选择,以及遇到的众多性能瓶颈和优化方案。 本书要表达的内容并不是简单罗列所做过的事情,而主要是帮助读者了解当网站遇到类似问题时,应如何思考不同的解决思路、为什么要这样做、如何做出最终的方案选择…… 图书详情:https://item.jd.com/12371801.html

优秀的个人博客,低调大师

带你入门Python爬虫,8个常用爬虫技巧盘点

python作为一门高级编程语言,它的定位是优雅、明确和简单。 我学用python差不多一年时间了, 用得最多的还是各类爬虫脚本, 写过抓代理本机验证的脚本、写过论坛中自动登录自动发贴的脚本 写过自动收邮件的脚本、写过简单的验证码识别的脚本。 这些脚本有一个共性,都是和web相关的, 总要用到获取链接的一些方法,故累积了不少爬虫抓站的经验, 在此总结一下,那么以后做东西也就不用重复劳动了。 如果你在学习Python的过程中遇见了很多疑问和难题,可以加-q-u-n227 -435-450里面有软件视频资料免费领取 1、基本抓取网页 get方法 post方法 2.使用代理服务器 这在某些情况下比较有用, 比如IP被封了,或者比如IP访问的次数受到限制等等。 3.Cookies处理 是的没错,如果想同时用代理和cookie, 那就加入proxy_support然后operner改为 ,如下: 4.伪装成浏览器访问 某些网站反感爬虫的到访,于是对爬虫一律拒绝请求。 这时候我们需要伪装成浏览器, 这可以通过修改http包中的header来实现: 5、页面解析 对于页面解析最强大的当然是正则表达式, 这个对于不同网站不同的使用者都不一样,就不用过多的说明。 其次就是解析库了,常用的有两个lxml和BeautifulSoup。 对于这两个库,我的评价是, 都是HTML/XML的处理库,Beautifulsoup纯python实现,效率低, 但是功能实用,比如能用通过结果搜索获得某个HTML节点的源码; lxmlC语言编码,高效,支持Xpath。 6.验证码的处理 碰到验证码咋办? 这里分两种情况处理: google那种验证码,没办法。 简单的验证码:字符个数有限,只使用了简单的平移或旋转加噪音而没有扭曲的, 这种还是有可能可以处理的,一般思路是旋转的转回来,噪音去掉, 然后划分单个字符,划分好了以后再通过特征提取的方法(例如PCA)降维并生成特征库, 然后把验证码和特征库进行比较。 这个比较复杂,这里就不展开了, 具体做法请弄本相关教科书好好研究一下。 7. gzip/deflate支持 现在的网页普遍支持gzip压缩,这往往可以解决大量传输时间, 以VeryCD的主页为例,未压缩版本247K,压缩了以后45K,为原来的1/5。 这就意味着抓取速度会快5倍。 然而python的urllib/urllib2默认都不支持压缩 要返回压缩格式,必须在request的header里面写明’accept-encoding’, 然后读取response后更要检查header查看是否有’content-encoding’一项来判断是否需要解码,很繁琐琐碎。 如何让urllib2自动支持gzip, defalte呢? 其实可以继承BaseHanlder类, 然后build_opener的方式来处理: 8、多线程并发抓取 单线程太慢的话,就需要多线程了, 这里给个简单的线程池模板 这个程序只是简单地打印了1-10, 但是可以看出是并发的。 虽然说Python的多线程很鸡肋 但是对于爬虫这种网络频繁型, 还是能一定程度提高效率的。 9. 总结 阅读Python编写的代码感觉像在阅读英语一样,这让使用者可以专注于解决问题而不是去搞明白语言本身。 Python虽然是基于C语言编写,但是摒弃了C中复杂的指针,使其变得简明易学。 并且作为开源软件,Python允许对代码进行阅读,拷贝甚至改进。 这些性能成就了Python的高效率,有“人生苦短,我用Python”之说,是一种十分精彩又强大的语言。 总而言之,开始学Python一定要注意这4点: 1.代码规范,这本身就是一个非常好的习惯,如果开始不养好好的代码规划,以后会很痛苦。 2.多动手,少看书,很多人学Python就一味的看书,这不是学数学物理,你看例题可能就会了,学习Python主要是学习编程思想。 3.勤练习,学完新的知识点,一定要记得如何去应用,不然学完就会忘,学我们这行主要都是实际操作。 4.学习要有效率,如果自己都觉得效率非常低,那就停不停,找一下原因,去问问过来人这是为什么。

优秀的个人博客,低调大师

Java年末盘点:2017年惊喜和2018年预测

【大咖・来了 第7期】10月24日晚8点观看《智能导购对话机器人实践》 最近小编总结了Java在今年的走势,发现Java虽然依旧被唱衰,但直到今天,各大排行榜的首位依旧被Java占领。 TIOBE12月份的排行榜新鲜出炉。 虽然与上一年相比下降了4.59%,但依然甩开其他语言再占榜首。TIOBE榜单的前三名已经有超过15年没有出现过变化了。使用人数最多的三大语言Java、C、C++跟2001年一样,毫无悬念地占据了榜单***、第二、第三的位置。 根据TIOBE发布的编程语言长期走势图,Java无疑是2017年TIOBE排行榜冠军。从走势曲线上可以明显看出,继2014年低谷期之后,今年10月份Java又刷新了历史,创造了12.431%的***新纪录。虽然排行榜只是反映某个编程语言的热门程度,并不能说明一门编程语言好不好,或者一门语言所编写的代码数量多少,但如今除了 Python 取得迅猛发展外,其它脚本语言排名正逐渐下滑,有的甚至跌出前 20 名。 以下是各位IT大佬对Java2018年的发展作出的预测。 CYBRIC***技术官,Mike Kail 2017年:Java将继续有一个体面的覆盖率,这主要是由于旧的应用程序以及Android应用程序都在使用Java的事实。Node.js的受欢迎度将继续增长。 2018年:我认为将会慢慢发生从Java到JavaScript框架的转变,Node.js将继续增加覆盖率。 红帽公司工程部副总裁,Mark Little 2017年:对于Java来说今年是很重要的一年,有几个重要的发展促成了这项技术的不断成长。2017年,最值得注意的事件是甲骨文宣布将Java EE转移到开源的基金会上,以此更全面地开源。随后宣布,已经为Eclipse Foundation选择名为Eclipse Enterprise for Java (EE4J)的***项目来托管该计划。从Java EE 8(今年9月份推出另一个着名的Java开发)开始,该平台的持续发展有望在EE4J下实现。此外,我们还看到了2017v1.1和1.2版本的MicroProfile项目在持续推进中,进一步推动了企业Java在微服务开发方面的发展。 2018年:围绕EE4J的所有努力都代表了一个巨大的转变。虽然这个转变还有很多细节需要整理,不会在一夜之间发生。但是,与一年前相比,今天在平台上的进步速度是天差地别的,关系利益者的参与以及这些变化的前景使社区重新焕发活力。我预计,随着2018年的到来,能继续保持增长的势头。红帽长期以来都是一个更加开放企业的倡导者身份,我们与Oracle以及来自IBM的同行一同探讨。我相信,随着Java EE社区的不断发展,Java将在未来几年中仍是企业的主导技术。 Realm的CMO,Paul Kopacki 2017年:从Android社区接受Kotlin的速度来看,很显然,有大批的人愿意转移到更现代化的东西上。 2018年:Kotlin将在其他平台上与Java进行竞争,但“进攻”的速度要比今年慢得多。虽然Java语言一直以来都受到Kotlin竞争的威胁,但JVM将继续寻找新的用例,并将继续成为Java堆栈的优势。

优秀的个人博客,低调大师

2017 先知创新大会现场盘点 | 以干货彰显实力

量子密码的现有研究和未来趋势 议题:量子和相对论密码学:基于物理原理的信息安全 演讲嘉宾:施尧耘 阿里云首席量子技术科学家,之江实验室副主任 “大型量子计算机出现后,目前广泛使用的公钥密码系统都不安全了。所以可以肯定的是这些系统会逐步被替换成我们不知道如何用量子计算机破解的系统。这就是所谓的‘后量子密码学’,美国国家标准局现在正在收集候选协议。这个对公钥密码系统颠覆已经在进行中,即使大型量子计算机的出现还很遥远。”这次的演讲,会围绕量子密码的现有研究和未来趋势,在中国做首次分享,技术本身和角度上都有创新点。 (图:施尧耘) 为黑客建立档案库 议题:跨浏览器设备指纹在黑客溯源中的应用 演讲嘉宾:云舒 默安科技CTO兼联合创始人;程进 默安科技安全研究员 设备指纹是一项常用在风控领域的技术,但在黑客溯源领域还鲜有人使用,本议题研究了目前最新的

优秀的个人博客,低调大师

半年盘点:2017年最酷的10个开源产品

今年开源技术的发展势头并没有放缓。开源创新正在持续向前推动着整个技术产业,开发者和企业拥抱开放模式的应用开发、IT基础设施自动化和其他业务关键职能。2017年上半年,推出了重要开源新产品的厂商包括开源巨头Red Hat、以及像Docker、Puppet和Mesosphere这样的新兴厂商。 下面就让我们来看看2017年上半年10个最酷的开源产品。 Chef Automate Chef最近公布了对其持续IT自动化平台Chef Automate的更新,这次更新中包括合规自动化,这样Chef Automate就可以更好地帮助满足合规性和安全性要求(并在这个过程中改进速度和效率)。其他还包括通过与Chef开源产品Habitat的紧密集成改善Chef Automate的应用自动化,Habitat是Chef为用户简化应用创建过程中关键步骤的开源产品。 Cloudera Altus 开源技术公司Cloudera最近推出了一款新的平台即服务——Cloudera Altus,旨在简化公有云环境中的大数据处理。Altus提供了对基础设施的按需访问,数据工程师不需要花费时间在基础设施管理和运作上——最终让创建数据密集型应用的工作变得更加简单。此外据Cloudera表示,迁移到公有云的风险也降低了。 CoreOS Tectonic 1.6.4 作为Tectonic企业容器管理平台的提供商,CoreOS最近发布了一项新功能,让混合云之间的应用迁移变得更轻松。Tectonic 1.6.4提供了一个“企业就绪”版本的Kubernetes容器编排功能,带有最新的Kubernetes 1.6升级,让用户可以获得类似云的操作模式,不管他们正在使用哪种IT基础设施。 Couchbase Server 4.6 开源数据提供商Couchbase表示,最近升级的Couchbase Server 4.6将有助于简化应用部署和确保应用安全。Server 4.6还提供了更高的应用性能,以及集成的.Net Core应用部署,增强了对列表和映射等数据的支持。此外,Couchbase还公布了其数据平台内其他产品的升级,包括Sync Gateway 1.4(现在带有“面向移动和物联网应用的无限扩展”)以及Kafka Connector 3.0(更好的可扩展性和性能,连接Apache Kafka)。 Docker:Moby Project和LinuxKit 容器技术先驱Docker最近推出的两个新的开源项目,旨在让容器化软件对于开发者和解决方案提供商更有帮助。Moby Project是一款工作流工具,帮助开发者组装多个基于容器的系统,包括组件库、框架和参考蓝图。开发者们甚至可以利用非Docker组件,有助于在构建专有应用的时候避免重新构建。同时,Linux Kit帮助开发者快速构建一个安全的、干净的、可移植的Linux子系统。 Kubernetes 1.6 开源容器编排工具Kubernetes最近进行了升级,专注于为用户提供更好的可扩展性和自动化。Kubernetes 1.6支持500个节点的集群(总集群规模增加了150%),且增加了智能默认项,并将多个更新带入动态存储配置功能中。此外,最新的发布让多个功能推进到beta测试环节,包括基于角色的访问控制,以增强安全性。 Mesosphere DC/OS 1.9 Mesosphere最近公布了对其容器操作和数据服务自动化平台的最新升级——DC/OS 1.9。据Mesosphere称,这次改进包括增加了原生的监控和故障排除工具、基于GPU的调度和“Pods”——用于简化来自Docker或者Mesos的容器中的应用管理。此外安全性和合规性方面也得到了提升,增加了新方法来限制对底层IT基础设施的访问,主要针对那些访问软件调试和相关应用的开发者。 Puppet 5 Platform IT基础设施自动化公司Puppet最近公布了对其核心开源平台的升级。Puppet 5 Platform——包括Puppet Agent、Puppet Server和PuppetDB——有多项改进,例如让下载和Puppet部署实施变得更轻松。此外Puppet还推出了Lumogon,一款更好洞察容器部署的开放解决方案,以及对Puppet Enterprise 2017.2企业产品的升级。Puppet Enterprise的升级引入了多个新功能,例如包检测(用于找出应该自动管理的软件包)以及视觉编排工作流(用于该产品Web界面内的基础设施编排)。 Red Hat超融合基础设施 Red Hat最近推出了它所谓的第一款开源超融合基础设施软件堆栈。Red Hat超融合基础设施把Red Hat的4项技术融入到一款面向云部署的集成产品中,这4个组件分别是:Red Hat Virtualization,Red Hat基于开源KVM技术的虚拟机管理程序;Gluster存储,Red Hat基于GlusterFS项目的横向扩展文件系统;Red Hat Enterprise Linux(RHEL)操作系统;Red Hat的IT自动化平台Ansible、Red Hat超融合基础设施软件堆栈瞄准那些旨在简化他们数据中心基础设施的客户。 Red Hat OpenShift.io Red Hat的开源平台即服务OpenShift为企业提供了云原生的应用开发和部署,通过利用Docker容器和Kubernetes容器编排。Red Hat最近推出了构建在OpenShift上的OpenShift.io,一个新的在线开发环境,用于创建云原生的、基于容器的应用。该环境专门针对开发团队设计的——包括分布式团队。功能包括实时堆栈分析,用于改进对漏洞和使用中异常情况的检测。 最终目标实现开发部署到混合云的容器应用更有效的协同。在OpenShift.io底层,是多个开源项目,包括Jenkins、Eclipse Che和fabric8,Red Hat这样表示。 原文发布时间为:2017年7月25日 本文作者:孙博 本文来自云栖社区合作伙伴至顶网,了解相关信息可以关注至顶网。

优秀的个人博客,低调大师

盘点2015年上半年IT宕机事件

在互联网已经成功"挟持"我们的现在,假如未来某天早晨起床后发现,网络瘫痪,服务器宕机,我们早已习惯了的"秩序"轰然倒塌,那会是何种场景? 人始终有种不满足的心态,希望身边的一切都是完美的,但现实却总不能如愿。就像服务器,谁也不敢说能够达到100%的可靠性。然后人们就去追求99.9999%,追求99.999%,要求每年的宕机时间要少于在5.26分钟。 2015已过半,在这半年内,全球共发生了多少起宕机事件,已无法统计,但是,我们仍然希望举出我们所熟知的例子,来"以史为鉴"。 美国——大洋的彼岸 Facebook 2015年1月27日,2点起,便有网友发现,无法登陆Facebook,页面显示"对不起,出故障了,目前正在抢修,会尽快修复"。同时,黑客组织Lizard Squad发推特,声称对此次宕机事件负责。 Facebook页面 此前Lizard Squad曾发布声明表示对多起高调的网络攻击案件负责,比如索尼多媒体平台PlayStation Network服务故障、微软Xbox Live服务故障,以及入侵马航官网等等。有迹象表明,该黑客组织善于利用僵尸网络来发动大规模的DDoS攻击。 Facebook发言人称:"此次故障与第三方攻击无关,发生故障的原因是我们对系统设置做了一点改动。"但相关数据显示,Facebook美国总部当天曾遭受大规模DDos攻击。 苹果 2015年3月11日,包括App Store、iTunes Store、Mac App Store以及iBooks Store在内的一系列苹果在线商店服务,遭遇大面积服务中断。据统计事故恢复时间长达11个小时。 苹果服务中断 美联社指出,此次苹果发生的事故都属于全球用户众多的盈利性业务,苹果官方系统页面显示在11日美国东部时间16点45分,苹果的ITunes商店、App Store软件店、Mac软件店已经恢复了正常。 苹果公司针对该事件公开向用户道歉,并表示,宕机原因是苹果公司内部DNS错误。但此次故障,使苹果在股市上下跌1.82%,市值蒸发了130亿美元。 纽交所 损失谁来补? 2015年7月8日11时32分至15时10分,纽交所因故障暂停交易。据称,作为世界最大交易所之一,纽交所暂停交易超过3小时,可谓前所未有。 随后,纽交所在推特上表示:此次故障由于交易所内部技术问题导致,已排除外部网络攻击的可能。纽交所主席法利表示,此次故障可能与软件升级有关。 香港——众望所归 难逃劫难 长久以来,香港数据中心地位,在云服务商和广大企业用户心目中的形象都非常靠谱。客观上,这主要是因为香港的国际金融中心地位,和香港黄金地理位置。 主观上,也少不了香港政府的大力支持,不但在选址和价格等方面有各种优惠,还为很多机房提供了免费的制冷供电。除此之外还有可以减少麻烦,可以绕过内地的数据备案制度。 阿里云公告 在2015年6月21日,阿里云香港节点出现权限宕机,业务中断超过12小时!甚至出现部分用户数据损毁! 当晚,阿里云发布公告称,此次故障因香港运营商IDC电力问题所致。据称其二号数据中心于21日上午9点40分因电力故障导致部分客户服务终端,经抢修,下午2点恢复部分客户服务,晚上9点50分完全恢复电力供应,客户服务全部恢复正常。 俄罗斯银行——真是运维的错? 2015年6月29日下午5点30分(莫斯科时间)左右,俄罗斯鞑靼斯坦共和国阿尔法银行自动取款机、银行网点均停止服务。 阿尔法银行主页(顶部黑色为道歉延时公告) 6月30日晨,该行自动取款机、网上银行和银行网点都已正常恢复运行,阿尔法银行称,其技术故障已经解除,但并没给出准确的故障时间。 有消息称,此次俄罗斯阿尔法银行的业务停止是由于技术故障导致。但也有网友表示对这种解释不信服,认为这是让运维人员做替罪羊。 黑色五月——组团宕机,钱包安全谁来管? 2015年5月,陌陌、网易、支付宝、携程网、艺龙网、招商证券、同花顺、齐鲁证券接连故障之后,2015年的5月被不少圈内人士揶揄为"黑色五月"。 5月10日陌陌因网络故障无法正常使用,第二天网页也宣布骨干网络受到攻击。 网易——谣言四起,损失惨重 “网易大厦着火?”2015年5月11日晚21时左右,网易旗下游戏、有道云笔记、LOFTER、考拉海购、网易公开课等无法正常访问。顿时谣言四起,有人称故障原因为:网易大厦着火! 网易微博公告 事后,网易发表官方声明称:"因骨干网络出现异常,导致网易旗下部分游戏及网站论坛暂时无法登陆,技术人员已经在抢修中。关于网易大厦着火的新闻为谣言,网易公司保留追究法律责任的权利。" 12日6时,大部分产品恢复正常。但此次网易骨干网络出现异常,也伤透了网易用户的心。游戏玩家称:一夜无事可做;正值创业期的闪电邮用户称:个人损失惨重;甚至还有用户直接宣布弃用网易产品。 支付宝 5月27日,支付宝大面积瘫痪,电脑端和移动端均无法进行转账付款,缘由是杭州市萧山区某地光缆被挖断,进而导致支付宝一个主要机房受影响,导致部分地区的支付宝服务中断数小时。 支付宝服务中断 对此事件,支付宝官方回应称:"由于杭州市萧山区某地光纤被挖断,造成目前少部分用户无法使用支付宝,运营商蜀黍正在抢修,支付宝攻城狮正在紧急将用户请求切换至其他机房,受影响的用户正在逐步恢复。您的资金安全并不会因此受到任何影响。如果出现交易信息不同步的情况,在修复后会恢复同步。请大家放心。" 携程&艺龙 5月28日11时09分,携程由于员工错误操作,导致官方网站及App无法正常使用。直至晚上22时45分,携程官方才确认除个别业务外,携程网站及APP恢复正常,数据没有丢失。由于涉及的业务、应用及服务繁多,验证应用与服务之间的功能是否正常运行,花了较长时间。 据估算,从瘫痪到修复,携程"宕机"近12小时,预计直接损失超过1200万美元,折合人民币7400多万。 在携程出现故障后,携程在首页上方提示,消费者可以前往艺龙旅行网进行消费。不久之后,艺龙旅行网首页也无法访问。28日18时许,艺龙官方微博回应道,"因遭受网络攻击,艺龙网首页出现部分用户无法访问的情况,目前已恢复正常"。 携程网页截图 5月宕机事故频频发生,消费者最关心的问题是"躺"在支付宝钱包里的钱是否安全,以及由于宕机所造成的损失应该谁来担责。 爱奇艺——几家欢喜几家愁 宕机总会让我们不自觉的联想到不愉快的事情,可谁知,2015年7月3日,爱奇艺服务器宕机,原因是:太受欢迎了! 爱奇艺官方声明 7月3日晚8点,《盗墓笔记》在爱奇艺全集上线,由于必须是"爱奇艺VIP会员"才能观看全集,这掀起了"充值付费潮"。然而,瞬间涌入的流量,让爱奇艺服务器宕机了!最多时有超过70%的VIP会员无法观看《盗墓》。 5日,爱奇艺高级副总裁杨向华接受采访,公开回应了爱奇艺宕机事件。称:国内网民的付费能力此前似乎一直都被低估了。尽管爱奇艺提前增加了3倍服务器资源,但最终还是没能抵挡住网友的热情。 爱奇艺高级副总裁杨向华表示,6月12日《盗墓笔记》先导集上线之后,爱奇艺VIP会员数周环比增幅超100%,全集上线播出后,VIP开通请求更是超过上百万次。 然而,这次宕机事件却丝毫没有影响到网友们对爱奇艺的热情。#爱奇艺会员#登上新浪热搜第一;"爱奇艺"的百度指数从67万增长到224万;"爱奇艺会员"的百度指数增长了20倍;截至7月4日晚,《盗墓笔记》总播放量已超过9.7亿。 谁之过? 针对该类问题,通常我们首先想到的就是技术!为了提高服务器安全性,可以采用软硬件结合的方式,提高服务器可用性;要进行备份确保信息不会丢失;通过冗余,提高服务器性能。 频频宕机谁之过? 但像支付宝,俄罗斯阿尔法银行和美国纽交所等金融行业竟也会长时间宕机,这不得不使我们考虑是不是只要有技术就够了? 答案显而易见,在技术提升的同时,我们更应该转变的是观念,正视容灾备份的重要性。这样才能将风险降到最低,避免“世界末日”的到来。 伴随着"互联网+"对经济社会作用的日渐凸显,网络信息服务已经变为信息社会的基础设施。加强网络基础设施建设,在很多国家已经被提升到与水、电、气、公路同等重要的程度。 尽管我国近年来信息化水平取得了不少进步,请不要让基础设施建设束缚了前进的脚步。只有客观的评定历史,才能做到对未来负责…… 作者:何妍 来源:51CTO

优秀的个人博客,低调大师

大数据时代 安防云存储的特征盘点

根据IDC预测,全球在2010年正式进入ZB时代,全球数据量大约每两年翻一番,意味着人类在最近两年产生的数据量相当于之前产生的全部数据量。爆炸式增长的数据,正推动人类进入大数据的时代。 维基百科全书的定义:“大数据是飞速增长的,用现有数据库管理工具难以管理的数据集合”。这些数据包括:社交媒体、移动设备、科学计算和城市中部署的各类传感器等等,其中视频又是构成数据体量最大的一部分。据IMSResearch统计,2011年全球摄像头的出货量达到2646万台,预计到2015年摄像头出货量达5454万台。2011年一天产生的视频监控数据超过1500PB,而累计历史数据将更为庞大,在视频监控大联网、高清化推动下,视频监控业务步入数据洪水时代不可避免。 安防行业的大数据主要来源于平安城市、智慧城市和智能交通等大型安防项目。当前,智慧城市建设已成为地方政府推进城镇化发展的重要途径,而随着智慧城市的发展,对高清摄像机和智能化监控设备的需求会持续增长,安防行业大数据体量也将成几何性增长。 大数据考验云存储能力 安防行业还没有真正简单有效的技术可以通过对视频的处理来提取出更多结构化的数据。当然这也和很多其他因素有关,例如,摄像机的硬件性能不足以支持高级智能分析技术,对于一个城市来说数以万计的监控点每天产生的数据量也是惊人的,以现在的技术来说进行如此大规模的智能分析的成本过高,甚至超出了数据所带来的价值,这些都导致了安防行业大数据无法落实到底。 从目前大部分的安防系统架构看,安防大数据的传输渠道主要是网络,一般都采用联网汇聚、分级存储的机制,网络一般为千兆网,存储也以一般的磁盘阵列存储为主。为了适应安防信息整合,安防数据分析和信息挖掘的需求,安防系统逐步倾向于互联、整合,而安防数据信息也逐渐的汇聚和集成,出现了万兆网络集中汇聚管理。这对安防存储提出个更高的要求。 为了解决这一问题,在云计算新一代信息技术的基础上,提出了云存储这一全新的概念,就是利用集群技术、网络技术、分布式文件管理等技术,将云分布的不同类型的存储设备协同工作,是一种存储兼顾管理的存储体系,为平安城市所需要的共享信息资源提供服务接口。使得视频监控系统变成云服务应用,从而提高系统海量视频数据的处理性能,以及整个系统容量的扩展。 有利应用将是大数据的云存储服务特征 从目前多种云存储的方案中可以明显体会到,云存储本身并非某一特定的技术路线,而是一种具有典型特质的存储服务方式,即可以明确地指出云存储是一种服务,而非某种单一的技术。云存储的服务就屏蔽了大量的技术细节、功能特点等繁琐的实现原理,做到无论其构成如何复杂、系统如何庞大,其服务方式始终是具有共性和可描述的。 那么云存储的服务可以描述为是统一、灵活、安全的存储服务。统一体现在对云存储内部的多种存储技术、多种存储设备形态的屏蔽。通过软件的统一整合向用户提供唯一的服务获取出口,具体可以体现为唯一访问IP、唯一的管理界面、唯一的操作方式等等。 灵活则体现在从云存储获取服务时的自由度上。用户使用云存储服务,将自己的数据写入云存储,可做到需要多少容量就获取多少容量,不受限于底层存储设备的规格限制。这个就需要云存储系统在容量分配时能够做到足够的精准,同时对调整的要求也要足够灵活。 安全体现的是云存储提供可靠保障的能力,对不同的数据可以提供不同的安全级别保障,差异化服务。视频监控数据体量庞大,因此常有不同的存储周期要求,不同的存储周期对于数据的完整性要求也不尽相同。因此云存储系统提供存储安全保障的能力应该匹配实际项目的需求,在项目成本控制和安全级别要求上达到平衡和共识。 更重要的如何更有利于应用,如果说传统存储的关键词在于性能和可靠性,那么未来存储将更注重对感知一词的实现。存储应该更为智能,更了解应用需求和数据生命周期。很明显,感知更符合大数据对于存储的需求,大数据最根本的要点在于挖掘数据价值,那么从存储的角度讲,就是需要将系统做的更为智能,不仅是需要根据冷热程度将数据存至不同的介质上,更需要按照数据从创建到销毁的整个过程进行管理,并且依据系统中应用需求动态的调整存储策略。 原文发布时间为:2015年12月17日 本文来自云栖社区合作伙伴至顶网,了解相关信息可以关注至顶网。

优秀的个人博客,低调大师

盘点混合云计算的9大关键趋势

自从几年前云计算的概念受到IT界的关注以来,公有云、私有云和混合云这三种云计算方式都有了可观的演进。其中混合云计算方式是最热门的云计算方式,在接受调查的公司中,有88%的公司将混合云计算摆在至关重要的地位。 混合云计算的疾速演进意味着一两年前的传统观念已经过时了。几个行业分析师针对混合云在2016年的走势将会如何,提出几个比较有意思的答案。 2016年可能是我们将混合云投入使用的一年 混合云从本质上来说依赖于私有云,这对企业来说是比较难实现的。事实上,亚马逊,谷歌和微软的公有云已经进行了大量的投资,并且起步也比较早。私有云拖了混合云发展和使用的后腿。 私有云没有得到这么多的投资,这是有私有云的性质决定的。私有云意味着维护和投资你自己的数据中心,而许多公有云提供商正在推动企业减少或者消除他们的数据中心。 然而,得益于 OpenStack 的发展和微软的 Azure Stack ,这两者基本上就是封装在一个盒子里的私有云,我们将会看到私有云慢慢追上公有云的发展步伐。支持混合云的工具、基础设施和架构也变得更加健壮。 容器,微服务和 unikernels 将会促进混合云的发展 分析师预言,到2016年底,这些原生云技术会或多或少成为主流的。这些云技术正在快速成熟,将会成为虚拟机的一个替代品,而虚拟机需要更多的资源。 更重要的是,他们既能工作在在线场景,也能工作在离线场景。容器化和编排允许快速的扩大规模,进行公有云和私有云之间的服务迁移,使你能够更容易移动你的服务。 数据和相关性占据核心舞台 所有的云计算方式都处在发展模式,这使得云计算变成了一个技术类的故事。咨询公司 Avoa称,随着云趋于成熟,数据和相关性变得越来越重要。起初,云计算和大数据都是关于怎么得到尽可能多的数据,然后他们担心如何处理这海量的数据。 2016年,相关组织将会继续锤炼如何进行数据收集和使用的相关技术。在必须处理的技术和文化方面仍然有待提高。但是2016年应该重新将关注点放在从各个方面考虑的数据重要性上,发现最相关的信息,而不只是数据的数量。 云服务将超越按需工作负载 AWS(Amazon Web Services) 起初是提供给程序员或者是开发人员能够快速启动虚拟机、做一些工作然后离线的一个地方。本质上是按需使用,要花费更多的钱才能让这些服务持续运行、全天候工作。 然而,IT 公司正开始作为服务代理,为内部用户提供各种 IT 服务。可以是内部 IT 服务,公有云基础架构提供商,平台服务和软件服务。 他们将越来越多的认识到像云管理平台这样的工具的价值。云管理平台可以提供针对不同服务的基于策略的一致性管理。他们也将看到像提高可移植性的容器等技术的价值。然而,云服务代理,在不同云之间快速移动工作负载从而进行价格套利或者类似的原因,仍然是行不通的。 服务提供商转变成了云服务提供商 到目前为止,购买云服务成了直销模式。AWS EC2 服务的使用者通常变成了购买者,要么通过官方认证渠道,要么通过影子 IT。但是随着云服务越来越全面,提供的服务菜单越来越复杂,越来越多的人转向了经销商,服务提供商转变成了他们 IT 服务的购买者。 2nd Watch (2nd Watch 是为企业提供云管理的 AWS 的首选合作伙伴)最近的一项调查发现,在美国将近85%的 IT 高管愿意支付一个小的溢价从渠道商那里购买公有云服务,如果购买过程变得不再那么复杂。根据调查,这85%的高管有五分之四的愿意支付额外的15%或者更多。三分之一的受访高管表示,这些有助于他们购买、使用和管理公有云服务。 物联网和云对于2016年的意义好比移动和云对2012年的意义 物联网获得了广泛的关注,更重要的是,物联网已经从测试场景进行了实际应用。云的分布式特性使得云成为了物联网非常重要的一部分,对于工业物联网,与后端系统交互的机械和重型设备,混合云将会成为最自然的驱动者,连接,数据采集和处理将会发生在混合云环境中,这得益于私有云在安全和隐私方面的好处。 NIST 对云的定义开始瓦解 2011年,美国国家标准与技术研究院发布了“ NIST 对于云计算的定义”(PDF),这个定义成为了私有云、公有云、混合云和 aaS 模板的标准定义。 然而随着时间的推移,定义开始改变。IaaS 变得更加复杂,开始支持 OpenStack,Swift 对象存储和神经网络这样的项目。PaaS 似乎正在消退,因为 PaaS 和传统的中间件开发几乎无异。SaaS,只是通过浏览器进行访问的应用,也正在失去发展动力,因为许多 app 和服务提供了许多云接口,你可以通过各种手段调用接口,不仅仅通过浏览器。 分析变得更加重要 对于混合云计算来说,分析将会成为一个巨大的增长机遇,云计算具有规模大、灵活性高的优势,使得云计算非常适合需要海量数据的分析工作。对于某些分析方式,比如高度敏感的数据,私有云仍然是主导地位,但是私有云也是混合云的一部分。因此,无论如何,混合云计算胜出。 安全仍然是一个非常紧迫的问题 随着混合云计算在2016年的发展,以及对物联网和容器等新技术的引进,这同时也增加了更多的脆弱可攻破的地方,从而导致数据泄露。先增加使用新技术的趋势,然后再去考虑安全性,这种问题经常发生,同时还有缺少经验的工程师不去考虑系统的安全问题,总有一天你会尝到灾难的后果的。 当一项新技术出来,管理规范总是落后于安全问题产生后,然后我们才考虑去保护技术。容器就是一个很鲜明的例子。你可以从 Docker 下载各种示例容器,但是你知道你下载的东西来自哪里么?在人们在对容器内容不知情的情况下下载并运行了容器之后,Docker 不得不重新加上安全验证。 像Path 和Snapchat 这样的移动技术在智能手机市场火起来之后也出现了重大的安全问题。一项新技术被恶意利用无可避免。所以安全研究人员需要通过各种手段来保证新技术的安全性,很有可能在部署之后才会发现安全问题。 原文发布时间为:2016年8月25日 本文来自云栖社区合作伙伴至顶网,了解相关信息可以关注至顶网。

优秀的个人博客,低调大师

盘点管理大数据存储的十大技巧

在1990年,每一台应用服务器都倾向拥有直连式系统(DAS)。SAN的构建则是为了更大的规模和更高的效率提供共享的池存储。Hadoop已经逆转了这一趋势回归DAS。每一个Hadoop集群都拥有自身的——虽然是横向扩展型——直连式存储,这有助于Hadoop管理数据本地化,但也放弃了共享存储的规模和效率。如果你拥有多个实例或Hadoop发行版,那么你就将得到多个横向扩展的存储集群。 而我们所遇到的最大挑战是平衡数据本地化与规模效率,这是一个鱼与熊掌兼得的话题。 数据本地化是为了确保大数据集存储在计算节点附近便于分析。对于Hadoop,这意味着管理数据节点,向MapReduce提供存储以便充分执行分析。它实用有效但也出现了大数据存储集群的独立操作问题。以下十项是Hadoop环境中管理大数据存储技巧。 1.分布式存储 传统化集中式存储存在已有一段时间。但大数据并非真的适合集中式存储架构。Hadoop设计用于将计算更接近数据节点,同时采用了HDFS文件系统的大规模横向扩展功能。 虽然,通常解决Hadoop管理自身数据低效性的方案是将Hadoop 数据存储在SAN上。但这也造成了它自身性能与规模的瓶颈。现在,如果你把所有的数据都通过集中式SAN处理器进行处理,与Hadoop的分布式和并行化特性相悖。你要么针对不同的数据节点管理多个SAN,要么将所有的数据节点都集中到一个SAN。 但Hadoop是一个分布式应用,就应该运行在分布式存储上,这样存储就保留了与Hadoop本身同样的灵活性,不过它也要求拥抱一个软件定义存储方案,并在商用服务器上运行,这相比瓶颈化的Hadoop自然更为高效。 2.超融合VS分布式 注意,不要混淆超融合与分布式。某些超融合方案是分布式存储,但通常这个术语意味着你的应用和存储都保存在同一计算节点上。这是在试图解决数据本地化的问题,但它会造成太多资源争用。这个Hadoop应用和存储平台会争用相同的内存和CPU。Hadoop运行在专有应用层,分布式存储运行在专有存储层这样会更好。之后,利用缓存和分层来解决数据本地化并补偿网络性能损失。 3.避免控制器瓶颈(Controller Choke Point) 实现目标的一个重要方面就是——避免通过单个点例如一个传统控制器来处理数据。反之,要确保存储平台并行化,性能可以得到显著提升。 此外,这个方案提供了增量扩展性。为数据湖添加功能跟往里面扔x86服务器一样简单。一个分布式存储平台如有需要将自动添加功能并重新调整数据。 4.删重和压缩 掌握大数据的关键是删重和压缩技术。通常大数据集内会有70%到90%的数据简化。以PB容量计,能节约数万美元的磁盘成本。现代平台提供内联(对比后期处理)删重和压缩,大大降低了存储数据所需能力。 5.合并Hadoop发行版 很多大型企业拥有多个Hadoop发行版本。可能是开发者需要或是企业部门已经适应了不同版本。无论如何最终往往要对这些集群的维护与运营。一旦海量数据真正开始影响一家企业时,多个Hadoop发行版存储就会导致低效性。我们可以通过创建一个单一,可删重和压缩的数据湖获取数据效率 6.虚拟化Hadoop 虚拟化已经席卷企业级市场。很多地区超过80%的物理服务器现在是虚拟化的。但也仍有很多企业因为性能和数据本地化问题对虚拟化Hadoop避而不谈。 7.创建弹性数据湖 创建数据湖并不容易,但大数据存储可能会有需求。我们有很多种方法来做这件事,但哪一种是正确的?这个正确的架构应该是一个动态,弹性的数据湖,可以以多种格式(架构化,非结构化,半结构化)存储所有资源的数据。更重要的是,它必须支持应用不在远程资源上而是在本地数据资源上执行。 不幸的是,传统架构和应用(也就是非分布式)并不尽如人意。随着数据集越来越大,将应用迁移到数据不可避免,而因为延迟太长也无法倒置。 理想的数据湖基础架构会实现数据单一副本的存储,而且有应用在单一数据资源上执行,无需迁移数据或制作副本 8.整合分析 分析并不是一个新功能,它已经在传统RDBMS环境中存在多年。不同的是基于开源应用的出现,以及数据库表单和社交媒体,非结构化数据资源(比如,维基百科)的整合能力。关键在于将多个数据类型和格式整合成一个标准的能力,有利于更轻松和一致地实现可视化与报告制作。合适的工具也对分析/商业智能项目的成功至关重要。 大数据遇见大视频 大数据存储问题已经让人有些焦头烂额了,现在还出现了大视频现象。比如,企业为了安全以及操作和工业效率逐渐趋于使用视频监控,简化流量管理,支持法规遵从性和几个其它的使用案例。很短时间内这些资源将产生大量的内容,大量必须要处理的内容。如果没有专业的存储解决方案很可能会导致视频丢失和质量降低的问题。 10.没有绝对的赢家 Hadoop的确取得了一些进展。那么随着大数据存储遍地开花,它是否会成为赢家,力压其它方案,其实不然。 比如,基于SAN的传统架构在短期内不可取代,因为它们拥有OLTP,100%可用性需求的内在优势。所以最理想的办法是将超融合平台与分布式文件系统和分析软件整合在一起。而成功的最主要因素则是存储的可扩展性因素。原文发布时间为:2016年10月10日 本文来自云栖社区合作伙伴至顶网,了解相关信息可以关注至顶网。

优秀的个人博客,低调大师

盘点工业物联网应用领域的市场细分

工业物联网(IIoT,Industrial Internet of Things )已经从各种技术及其相互联系中逐步发展。根据IDC 2017年物联网(IoT)的投资支出预测,全球在2020年之前准备投资的物联网(IoT)的三大行业(区域差异)都是工业互联网市场的一部分。工业物联网(IIoT,Industrial Internet of Things )可以定义为“机器,计算机和人员使用业务转型所取得的先进的数据分析成果来实现智能化的工业操作”。 工业物联网(IIoT )中第一大应用领域是制造业。它也是物联网(IoT)支出(包括软件,硬件,连接和服务)的最大行业。 在2016年,制造业的投资单独占1025亿美元,而物联网(IoT)的总投资额达1780亿美元,因为所有的物联网应用场景都是在制造业中汇合的。物联网(IoT)的总体支出为1780亿美元,制造业是迄今为止物联网的最大应用行业,工业物联网和制造业领域的业务量超过所有其他行业的所有消费者物联网(IoT)应用的投资总和。 根据2017年初IDC发布的研究,从支出的角度看,在制造业中除了运营之外,还有两个其他最重要的应用场景是生产资产管理和维护以及现场服务。 交通运输(Transportation)是物联网(IoT)支出的第二大市场。运输和物流(T&L, Transportation and logistics)公司正在寻求通过物联网(IoT)提供的先进的通信和监控系统来提升它们在整个价值链中的地位。 运输市场规模达到了780亿美元的物联网(IoT)支出规模,并将继续快速增长,就像物联网(IoT)在制造业市场中一样。交通运输的主要用途是货运监控,而物品运输的总体物联网(IoT)运输的支出费用总额达559亿美元,在2020年之前这一部分投资仍然是市场的主要推动力。 如果我们来看看运输和物流方面的整体工业物联网(IIoT )的发展,我们会看到数字化供应链和连接物流正在日益兴起,同时如同制造业一样,运输和物流(T&L, Transportation and logistics)市场的挑战之一就是许多玩家没有制定数字化策略就在市场环境压力下迫使他们加快数字化转型。在运输和物流(T&L, Transportation and logistics)中大约20%的数字转换成本是分配给供应链转型的。很明显,物联网(IoT)在这里起着重要的作用。 业界的技术专家为连接物流系统定义了四个支柱:IT安全,通信系统,供应链监控系统和车辆/运输跟踪。在加上云和分析,工业物联网(IIoT )是连接物流领域的驱动力,其中货运监控是其中领先的应用场景。 石油天然气,智能电网以及能源和公用事业市场的大量其他演变和使用案例也是工业物联网(IIoT )市场的主要组成部分。 根据IDC早些时候提到的数据,公用事业应用就是物联网支出方面的第三大产业,公用事业单独一项在2016年的支出达到了690亿美元。此外,还有一个明显的投资领域:电力和天然气应用的智能电网,在2016年这一领域的投资总额高达578亿美元。 工业物联网(IIoT )在整个数字化转型过程中扮演着重要角色,很多领域的数字化转型包括实现大多数部件的数字化供应链和大型生态系统的价值链,这其中显然也涉及零售/面向消费者应用方面。 然而,从工业物联网(IIoT )的角度来看,智能电网是电力供应和网络传输/分配的关键。其他部分应用还包括工厂的有效性,以及作为智能电网和物联网支持的运营和服务所导致的维护和数据驱动的机会。 朗锐智科(www.lrist.com)认为由工业物联网(IIoT )支持实施的维护和服务是几乎所有工业物联网行业的两个关键应用领域。多个领域的预测性维护,数据支持的服务和远程可能性监测,从服务到控制以及操作优化等,包括诸如医疗保健(远程健康监测,设备维护等),航空航天等以及许多其他工业物联网(IIoT )的应用场景,如机器人,煤矿,石油和天然气,采矿,冶金等。

优秀的个人博客,低调大师

2016半年盘点:最酷的10家云初创公司

企业IT正在快速发展,初创公司正在凭借着横向扩展架构、高度集成的数据源、灵活的资源配置、灵活的管理技巧,努力进入现代计算环境。 这个榜单中的一些新兴公司正在行业巨头合作,开发独特的组件来帮助增强主要企业产品的实力。其他一些公司则在寻求自己尖端开源技术的商业化,或者试图让解决方案提供商和企业IT负责人更轻松地利用云。 最令人兴奋的是,其中很多初创公司最终达到了准备好实现利用渠道优势的增长阶段。这些公司将会根据他们扩张的节奏发布正式的合作伙伴计划。 Blue Medora CEO: Nathan Owen 这家初创公司主要开发用于VMware vRealize云管理平台的特性和功能,去年这家公司得到快速发展,当时虚拟化巨头VMware参与了Blue Medora规模为460万美元的A轮融资。 当时,Blue Medora还创建了自己的True Visiblity Channel Program。 Blue Medora设立在密歇根Grand Rapids,创建于2007年,它在两年前发布了Oracle系统管理工具向VMware环境的扩展程序,让它步入了企业级的阵营。 除了Oracle和VMware之外,Blue Medora还对来自New Relic的系统管理解决方案进行了扩展,该公司管理层表示,他们打算将vRealize带入到Rackspace和IBM SoftLayer的公有云中。 N2W Software CEO: Uri Wolloch 这家以色列初创公司的使命是在把基础设施和工作负载迁移到云的时候缓解客户的担忧。 它名为Cloud Protection Manager的产品提供了备份和恢复解决方案,针对保护运行在Amazon Web Services实例上的数据进行了优化。 Cloud Protection Manager允许AWS客户备份实时生产环境,以及立即恢复他们的任务关键型数据和应用,包括全部EC2实例、单独的EBS卷、RDS数据库和Redshift Clusters。 这款产品让合作伙伴可以针对备份和恢复制订灵活且可扩展的策略。 AppFormix CEO: Sumeet Singh 通常来说 ,初创公司会在有了一大批小型VAR作为早期合作伙伴的情况下发布合作伙伴计划。 但是AppFormix——3年前创建的一家OpenStack专业公司,位于加州圣何塞——宣布Rackspace成为它的第一家经销商,准备将自己的云服务优化软件嵌入到在所有部署在私有云客户那里的OpenStack环境中。 AppFormix的技术可以评估裸机服务器、由Kebernetes平台(最初由Google开发)调度的容器工作负载、以及三大公有云:Amazon Web Services、Google Cloud Platform以及Microsoft Azure。 该平台的分析工具提供了跨层的可见性,衡量资源利用率,监控应用性能以更好地调度混合云平台。该软件可以找出瓶颈,实时重新分配资源,或者为长期容量规划做准备。 IndependenceIT CEO: Seth Bostock IndependenceIT是众多在Workspace-as-a-Service市场大放异彩的新兴公司之一。WaaS实现了全面的云解决方案,通过扩展VDI系统(简化交付远程桌面环境)的能力在企业级领域赢得关注。 IndependenceIT位于宾夕法尼亚州Allentown,该公司的Cloud Workspace Suite为服务提供商提供了一套自动化工具,为他们的员工交付远程工作空间——Windows桌面、自定义应用、数据、资源管理工具、受欢迎的软件即服 务应用。该解决方案可以部署在任何公有云中。 Mesosphere CEO: Florian Leibert 容器技术的复苏正在触发一个分布式企业应用的时代。Mesosphere将自己视为是承载这些现代应用的平台。 这家位于旧金山的初创公司,提供了强大的企业级能力,基于Mesos开源项目,它的很多创始人在其中发挥着关键角色。 Mesosphere Datacenter Operating System是该平台的商业化版本,将数据中心节点变成聚合的计算集群,并辅以调度和容器协调能力。 底层技术为大量Web应用提供支撑,包括Twitter和Airbnb。 Springpath CEO: Terry Cunningham 这家位于加州Sunnyvale的初创公司与思科达成了联盟合作关系,为思科新推出的HyperFlex超融合系统产品线贡献关键的软件部分。 Springpath的软件定义存储技术运行在思科的UCS服务器,被称之为HX Data Platform,将固态盘和传统硬盘聚合成为存储池,并将其转变为企业级的对象存储系统。 思科对这家初创公司印象深刻而进行了投资。 Infinite Ops CEO: Michael Fraser Infinite Ops是另外一家希望在Workspace-as-a-Service这个新兴市场分一杯羹的初创公司,提供的平台可以作为访问云提供商、工作空间模板的接口层,此外它还提供了一个应用商店和其他功能。 通过Infinite Ops的这个平台,合作伙伴可以跨公有云提供商快速部署各种服务,为他们的客户交付完全托管的桌面、虚拟应用、插件和云资源,所有这都可以在不到一个小时内完成。 这家位于西雅图的初创公司最近和Citrix Systems签订协议,构建允许Citrix合作伙伴在他们选择的公有云上部署云服务的模板。 Orbitera CEO: Marcin Kurc Orbitera旨在为渠道简化云业务,让平台合作伙伴可以构建独有的分校渠道,管理销售周期、运营、收费、市场推广、云工具和云服务的部署。 Orbitera位于加州西好莱坞,它让厂商、技术合作伙伴以及渠道可以构建有助于捆绑和交付云软件和基础设施的关系。 合作伙伴可以将该平台直接扩展到客户那里,用于发现和评估能最好地满足他们需求的云解决方案。 CloudBolt CEO: Jon Mittelhauser 这家云管理初创公司由互联网先锋人物Jon Mittelhauser领导,最近它发布了一个渠道计划以满足来自规模越来越大的企业级客户的新需求,包括全球一些最大的零售商、制造商和酒店业巨头。 这家位于加州坎贝尔的软件开发商希望提供面向不同群体的管理解决方案——这是一个新兴的IT领域,企业在其中部署复杂的、混合的魂晶,利用DevOps方法和分布式计算趋势。 CloudBolt可以管理尖端的数据中心技术,例如Linxu容器、软件定义网络、OpenStack和Cloud Foundry。该解决方案还可以跨多个公有云提供商使用。 ZeroStack CEO: Ajay Gulati 去年走出隐身模式的ZeroStack最近发布了一个正式的渠道计划。 这家位于加州山景城的初传公司希望可以通过一款超融合一体机简化OpenStack部署,它正在积极招募合作伙伴。 ZeroStack售卖的是一款横向扩展一体机,合作伙伴可以将其用于客户的数据中心。然后他们将其连接到软件即服务终端,通常在一个小时内就可以让客户运行在OpenStack上。 ZeroStack可以远程进行所有配置和管理,让用户查看和感知实际运行在他们自己基础设施上的公有云。 ====================================分割线================================ 本文转自d1net(转载)

优秀的个人博客,低调大师

盘点云计算的六大商业模式

【摘要】服务是什么?云服务是基于互联网的相关服务的增加、使用和交付模式,通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源。云服务指通过网络以按需、易扩展的方式获得所... 服务是什么?云服务是基于互联网的相关服务的增加、使用和交付模式,通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源。云服务指通过网络以按需、易扩展的方式获得所需服务。这种服务可以是IT和软件、互联网相关,也可以是其它服务。它意味着计算能力也可作为一种商品通过互联网进行流通。 既然云服务也是一种商品,也要进行流通,就说明有其特有的价值。那么作为一个提供云服务的企业,其商业模式决定着企业的发展,就显得至关重要。 纵观国内外,提供云服务的企业不胜枚举,每一个生存下来并发展壮大的云服务企业都有其独特的商业模式或客户群体,为了更直观的展现其特色,笔者进行了简单的归纳,希望能为读者提供借鉴。 一、基础通信资源云服务商业模式 1)简介:基础通信服务商已经在IDC领域和终端软件领域具有得天独厚的优势,依托IDC云平台支撑,通过与平台提供商合作或独立建设Pass云服务平台,为开发、测试提供应用环境。继续发挥现有服务终端软件的优势,提供Saas云服务。通过Paas带动Iaas和Saas的整合,提供端到端的云计算服务。 2)商业模式:均采取了“三朵云”的发展思路。第一,构建“IT支撑云”,满足自身在经营分析、资料备份等方面的巨大云计算需求,降低IT经营成本;第二,构建“业务云”,实现已有电信业务的云化,支撑自身的电信业务和多媒体业务发展;第三,开发基础设施资源,提供“公众服务云”,构建IaaS、PaaS、SaaS平台,为企业和个人客户提供云服务。 3)盈利手段: ①通过一次付费、包月,按需求、按年等向用户提供云计算服务。如CRM、ERP、杀毒等应用服务以及IM、网游、搜索、地图等无线应用。 ②通过测试环境、开发环境等平台云服务,减少云软件供应商的设备成本、维护成本、软件版权的费用,带动软件开发者开发应用,带动Saas业务的发展。 ③通过基础设备虚拟化资源租用,如存储、服务资源减少终端用户IT投入和维护成本。 ④提供孵化服务、安全服务、管理服务等按服务水平级别收费的人工服务,拓宽服务的范围。 典型案例:中国电信“e”云,鹏博士云服务 中国电信“e”云 中国电信的“e云”是以云计算为构架的个人移动增值服务,e云是安全的在线备份服务。中国电信”e云”是中国电信与EMC共同投资、联合经营、收入分成的模式。由EMC完成设备投资以及技术维护,中国电信提供网络能力和商业运营,运营收益五五分成。 鹏博士云服务 鹏博士未来发展的云计算商业模式是依据其丰富的IDC/CDN资源,以骨干网络为支撑,同时保持原有核心电信增值服务、安防监控、广告传媒业务。其发展云服务分为四部分:提供云存储、云主机、数据处理业务的IaaS服务;以定制服务、支撑开发环境的PaaS服务;云安全、云加速等软件服务的SaaS服务以及互联网增值业务、安防监控业务、广告传媒业务。而前向聚人气,后向收费的依靠持续性服务和广告等收入以及客户根据自身按数据中心主机以及占用数据使用情况进行付费的模式则是其云服务的盈利模式。 二、软件资源云服务商业模式 1)简介:与软硬件厂商以及云应用服务提供商合作提供面向企业的服务或企业个人的通用服务,使用户享受到相应的硬件、软件和维护服务,享用软件的使用权和升级服务。该合作可以是简单的集成,形成统一的渠道销售;也可以是多租户隔离的模式,即通过提供Saas平台的SDK,通过孵化的模式让软件开发商的应用程序的一个实例可以处理多个客户的要求,数据存储在共享数据库中,但每个客户只能访问到自己的信息。该业务模式主要是基于其他领域已经有很好的厂商提供服务的基础上,从终端用户的角度布局云计算产业链。 2)商业模式:以产品销售作为稳定的盈利来源向客户提供基于IaaS、PaaS、SaaS三个层面的云计算整体解决方案,尝试以BO模式提供运营托管服务。 3)盈利模式: ①向第三方开放环境、开发接口、SaaS部署、运营服务和用户推广带来的收益 ②收取平台租用费、收入分成或者入股的方式从第三方SaaS开发商获得收益。 ③提供孵化服务按照远程孵化、深度孵化进行收费。 ④软件升级和维护提供的收益。 典型案例:金蝶友商网在线管理服务,用友软件云服务 金蝶K/3Cloud云服务企业管理平台 金蝶已开发国内首个专注于支撑行业“云服务”的“前端桌面平台”——金蝶桌面服务系统,它整合所有服务通道,帮助用户一站式获取金蝶云服务资源,为客户构建“随你所需、随时随地、触手可及”的云标准支持服务模式。包括金蝶K/3Cloud云服务企业管理平台,金蝶ERP云服务解决方案等产品和服务,并以软件租赁,IT设备与运维服务,以及提供数据为盈利方式。 用友软件云服务 用友软件为了更大程度的满足客户需求,开始向云服务转型,即从原来的卖软件包、提供技术实施和培训的商业模式向以客户为中心的云服务商业模式转型,推进“用友软件+用友云服务”,同时构建“一个云平台”。用友软件云服务包括SaaS服务、托管服务、远程管理服务、云支持和云学习服务以及PaaS生态链和IaaS供应商合作服务。同时以收取平台租用费用、收入分成和从第三方SaaS开发商获得收益获得盈利。 三、互联网资源云服务商业模式 1)简介:互联网企业基于多元化的互联网业务,致力于创造便捷的沟通和交易渠道。互联网企业拥有大量服务器资源,确保数据安全。为了节能降耗、降低成本,互联网企业自身对云计算技术具有强烈的需求。因而互联网企业云业务的发展具有必然性。而引导用户习惯性行为的特点就要求互联网企业云服务要处于研发的最前沿。 2)商业模式:基于互联网企业云计算平台,联合合作伙伴整合更多一站式服务,推动传统软件销售向软件服务业务转型,帮助合作伙伴从传统模式转向云计算模式。针对用户和客户需求开发针对性云服务产品。 3)盈利模式: ①租赁服务,按时间租赁服务器计算资源的使用来收费。 ②工具租用服务,开发一些平台衍生工具(定制服务)——如远程管理、远程办公、协同科研等私有云的工具,也可以向客户提供工具的租用来收费。 ③提供定制型服务,为各类用户提供各种定制型服务,按需收费。 典型案例:Amazone(亚马逊)的AWS云平台、谷歌的GoogleApps Amazone(亚马逊)的AWS云平台 亚马逊以在线书店起家,成为全球领先的在线零售商。亚马逊也是云计算的领头羊。亚马逊在推出云计算之前收购了多家技术产品公司,之后推出了风格独特的云计算产品,也参与开创了云计算的商业模式。亚马逊的云计算产品总称为AmazonWebServices(亚马逊网络服务),主要由4部分组成:S3(SimpleStorageService,简单的存储服务);EC2(ElasticComputeCloud,可伸缩计算云);SQS(SimpleQueuingService,简单信息队列服务),以及SimpleDB。亚马逊目前为开发者提供了存储,计算,中间件和数据库管理系统服务,开发正可以在亚马逊云中开发应用软件,并基于亚马逊的的收费模式。为中小企业,提供服务存储、弹性计算及网络存储等服务,并通过HaaS的模式进行收费。 谷歌的GoogleApps 谷歌公司围绕其核心互联网搜索业务,收购了一批小型公司,并创建了一系列互联网服务,包括域名,电子邮件,在线日历,聊天,和可收费的GoogleApps(谷歌应用软件套件)等。GoogleApps就是以网络为基础的Office软件。GoogleApps有免费版和收费版两种,收费版每年每用户收费50美元。Google也与Salesforce结成联盟,提供GoogleApps和Salesforce产品的集成技术。收费版GoogleApps及广告收益成为其盈利模式。 四、存储资源云服务商业模式 1)简介:云存储将大量不同类型的存储设备通过软件集合起来协同工作。共同对外提供数据存储服务。云存储服务对传统存储技术在数据安全性、可靠性、易管理性等方面提出新的挑战。云存储不仅仅是一个硬件,而是一个网络设备、存储设备、服务器、应用软件、公用访问接口、接入网和客户端程序等多个部分组成的系统。 2)商业模式:以免费模式、免费+收费结合模式、附加服务模式为云存储商业模式的主流模式,通过这三种模式向用户提供云服务存储业务。而业务的模式的趋同目前已成云存储服务函待解决的重要问题之一。 3)盈利模式: ①对普通用户基础免费,增值收费(以国外居多数),也就是免费空间加扩容收费。 ②提供文件恢复、文件备份、云端分享等服务进行收费。 ③个人免费,企业收费(部分存储公司)。 典型案例:Dropbox云存储服务、金山云存储 Dropbox云存储服务 Dropbox成立于2007年,提供免费和收费服务,在不同操作系统下有客户端软件,并且有网页客户端,能够将存储在本地的文件自动同步到云端服务器保存。因为云端服务的特性,Dropbox的存储成本将被无限摊薄。新注册用户可免费获得2GB空间,付费帐号分50GB、100GB,以及1TB以上的团队帐号等级别。2009年开始,Dropbox采取了邀请注册的方式,邀请和受邀的注册帐号可以同时获得更多的存储空间,从而大大刺激了注册量。 金山云存储 金山云拥有云主机、海量云存储、负载均衡、云关系型数据库等多项核心业务。金山云以个人云存储——企业快盘个人版业务和企业用户存储业务——快盘商业版和云服务平台为云存储的两大基础业务,金山云存储更看中提供后端持久的服务,在个人云存储付费业务中,金山云以稳定为主,并且实现盈利还需长期投入。而对于企业用户市场的快盘商业版就是“只要有用户就会有收入”的收费服务模式,也是金山云现阶段的运行重点。 五、即时通讯云服务商业模式 1)简介:即时通讯软件发展至今,在互联网中已经发挥着重要的作用,他使人们的交流更加密切、方便。使用者可以通过安装了即时通信的终端机进行两人或多人之间的实时沟通。交流内容包括文字、界面、语音、视频及文件互发等。目前,即时通讯云服务提供商分为两种,一种通过提供简单的API调用就能零门槛获得成熟的运营级移动IM技术,另一种则提供成熟的即时通讯工具,由服务企业来整合云功能。即时通讯的云服务基于云端技术,保证系统弹性计算能力,可根据开发者需求随时自动完成扩容。其具有独特的融合架构设计,提供快速开发能力,不需要App改变原有系统结构,不需要用户信息和好友关系,进一步降低接入门槛。直接提供面向场景的解决方案,如客服平台。拥有高度可定制的界面结构和扩展能力,如界面、各种入口、行为、消息内容、消息展现方式、表情体系均可自定义。 2)商业模式:分为免费和收费两种模式,收费模式是目前即时通讯云服务的主要方式,而免费则是大势所趋。 3)盈利模式: ①按用户数量级别收费,超过既定数量级按阶梯收费。 ②按日活用户数收费,超过既定数量级按阶梯收费。 ③按用户离线存储空间收费。 ④对于提供成熟即时通讯工具的用户来说,则以即时通信为端口推送其他业务进行收费。 典型案例:思科BE6000企业协同办公方案、环信即时通信云 思科BE6000企业协同办公方案 思科BE6000企业协同办公方案是思科提供的一种协作解决方案组合产品,其特点是可按照企业需求任意部署,可以以“混合且匹配”的方式集成现有和新的协作技术,同时消除“锁定”风险,提供部署选择:自有设备部署或云托管 环信即时通信云 环信所有功能均以客户端SDK和RESTAPI接口形式提供,并提供完善的接口文档,接口调用SDK,接口调用示范代码。这极大降低集成商和第三方开发者接入环信平台,做集成和二次开发的投入和开发成本。环信提供多种风格的UI模板及源码,完全开源。开发者即可直接使用,也可在源码基础上快速改出自己风格的聊天页面。 六、安全云服务 1)简介:云安全云服务是网络时代信息安全的最新体现,它融合了并行处理、网络计算、未知病毒行为判断等新兴技术和概念,通过网状的大量客户端对网络中软件行为的异常监测,获取互联网中木马、恶意程序的最新信息,传送到server端进行自动分析和处理,再把病毒和木马的解决方案分发到每一个客户端。病毒特征库来自于云。只要把云安全集成到杀毒软件中,并可以充分利用云中的病毒特征库,可以达到及时更新,及时杀毒,保障了每个用户使用计算设备的信息安全。 2)商业模式:云安全防病毒模式中免费的网络应用和终端客户就是庞大的防病毒网络:通过“免费”的商业模式吸引用户,在提供个性化的服务、功能和诸多应用后实现公司的盈利;防病毒应用可与网络建设运营商、网络应用提供商等加强合作,建立可持续竞争优势联盟,可以最大程度的降低病毒、木马、流氓软件等网络威胁对信息安全造成的危害。 3)盈利模式: ①强化安全概念,以免费杀毒扩展其他集成云软件获得收益。 ②安全软件全套服务获得收益。 典型案例:瑞星的云安全杀毒服务 瑞星的云安全杀毒服务 瑞星“云安全”系统是由千千万万具有“云安全探针”的软件产品在互联网上组成的巨大反病毒软件体系。随着瑞星“云安全”的发展,除瑞星全功能安全软件、卡卡上网安全助手等瑞星产品集成了“云安全探针”的功能外,迅雷、网际快车、巨人、久游等一批重量级厂商也相继加入了瑞星“云安全”计划,这些软件的客户端也同时成为瑞星“云安全”系统中的“云安全探针”。每个“云安全探针”都会把可疑信息上传到“云安全”服务器进行分析,并从“云安全”服务器获得最新的“云安全”成果,防范病毒保护电脑安全。 奇虎360防病毒软件 奇虎360防病毒具备了较强的防病毒软件的特质,可以确保计算机拥有完善的病毒防护体系。公司防病毒软件的免费商业模式,开始改变着互联网在云安全时代的运行模式。免费的互联网精神建立起的“服务器云”和“终端云”将最终实现每一个用户在使用网络时无需考略病毒、木马、网页威胁等问题,防病毒的未来在360公司的两朵云中,几乎可以达到网络安全的最高境界,即网络就是防病毒软件,就是网络安全。 结语 以上只是简单罗列了国内外几家公司的云计算商业模式,所谓“世界上没有两片相同的树叶”,虽然它们的外在看着有些相似,但每个公司的云计算业务都有其特点和独有的方向。云服务的商业价值和商业模式的探讨也不会终结,但是我们知道,这个行业只会越来越好。 本文转自d1net(转载)

优秀的个人博客,低调大师

盘点:全球工业大数据战略众生相

2015年,人工智能、物联网迅猛发展,几乎所有人的目光都瞄准了“数据”产生的价值,大数据市场一触即发。2016年,全球大数据技术和服务市场将在未来几年保持高增长率,值得期待。如此,不妨一览全球大数据战略众生相。 第一站:中国 发展优势得天独厚 今年11月,党的十八届五中全会公报提出要实施“国家大数据战略”,这是大数据第一次写入党的全会决议,标志着大数据战略正式上升为国家战略。五中全会,开启了大数据建设的新篇章。 事实上,在2015年,“大数据”议题是国务院常务会议的座上客,“大数据”战略早露端倪。1月14日,部署加快发展服务贸易,以结构优化拓展发展空间,提出要创新模式,利用大数据、物联网等新技术打造服务贸易新型网络平台;2月6日,确定运用互联网和大数据技术,加快建设投资项目在线审批监管平台,横向联通发展改革,城乡规划,国土资源,环境保护等部门,纵向贯通各级政府,推进网上受理、办理、监管“一条龙”服务,做到全透明,可核查,让信息多跑路,群众少跑腿;7月,国务院办公厅印发的《关于运用大数据加强对市场主体服务和监管的若干意见》提出,要提高对市场主体服务水平;加强和改进市场监管;推进政府和社会信息资源开放共享;提高政府运用大数据的能力;积极培育和发展社会化征信服务;9月国务院印发《促进大数据发展行动纲要》,系统部署大数据发展工作,要求加强顶层设计和统筹协调,大力推动政府信息系统和公共数据互联开放共享,加快政府信息平台整合,消除信息孤岛,推进数据资源向社会开放,增强政府公信力,引导社会发展,服务公众企业。 值得注意的是,中国大数据发展优势独天独厚。中国信息消费市场规模量级巨大,增长迅速。在网络能力的提升、居民消费升级和四化加快融合发展的背景下,新技术、新产品、新内容、新服务、新业态不断激发新的消费需求,而作为提升信息消费体验的重要手段,大数据将在行业领域获得广泛应用。 第二站:韩国 从基础设施起步踏实推进 笔者对韩国大数据产业发展的有着较深影响的是2014年7月,韩国政府宣布了一项新的战略—未来增长引擎执行计划,列出了13个韩国未来增长引擎的领域,其中就包括大数据。韩国计划通过项目推动,达到扩大国内大数据市场规模和扩展国际市场占有率目标,到2020年,使大数据的国内和国际市场规模均超过10亿美元。同时还有在2011年首尔提出的“智慧首尔2015”计划,目标是到2015年成为世界上最方便使用智能技术的城市,建立与市民沟通的智能行政服务,建成适应未来生活的基础设施和成为有创造力的智慧经济都市。“智慧首尔2015”计划指出,公共数据已成为具有社会和经济价值的重要国家资产,首尔市将努力打造“首尔开放数据广场”,以促进信息技术和公共服务产业的进步和发展。 如今,韩国大数据发展也是非常地迅速。2015年韩国大数据行业市场规模已达13万亿韩元(约合人民币722亿元)。自2012年市场规模突破12万亿韩元后,韩国大数据行业以9%的年平均增长率不断发展壮大。目前,韩国大数据行业仍以提供数据的数据服务及数据库构建服务为主,数据咨询及大数据解决方案市场规模呈增长态势。根据韩国数据化振兴院发布的《2015韩国数据行业白皮书》,数据服务市场规模占总行业市场规模的47%,位列第一;数据库构建服务以41.8%的占有率紧随其后。 韩国大数据行业不断发展,企业对大数据的依赖度不断增加,数据专业人才需求也越来越大。韩国数据化振兴院的数据显示,目前韩国数据产业从业人员达30万人,但其中与数据直接相关的从业人员仅为7万人,人才缺口依然较大。根据《2015韩国数据行业白皮书》的统计数据显示,目前能够利用数据赋予产业附加价值的“数据科学家”人才最为紧俏,此外数据挖掘及分析相关的高级人才也颇受雇主欢迎。 第三站:美国 形成全体动员格局 美国是率先将大数据从商业概念上升到国家战略的国家。2012年3月,美国政府公布了2亿美元的《大数据研究发展计划》,提出通过提高美国从大型复杂数据中提取知识和观点的能力,加快科学与工程研究步伐,加强国家安全。同年11月公布的具体研发计划涉及各级政府、私企及科研机构的多个大数据研究项目。 作为大数据的策源地和创新引领者,美国大数据发展一直走在全球最前面。2014年5月美国发布《大数据:把握机遇,守护价值》白皮书,对美国大数据应用与管理的现状、政策框架和改进建议进行了集中阐述。该白皮书表示,在大数据发挥正面价值的同时,应该警惕大数据应用对隐私、公平等长远价值带来的负面影响。从《白皮书》所代表的价值判断来看,美国政府更为看重大数据为经济社会发展所带来的创新动力,对于可能与隐私权产生的冲突,则以解决问题的态度来处理。报告最后提出六点建议:推进消费者隐私法案;通过全国数据泄露立法;将隐私保护对象扩展到非美国公民;对在校学生的数据采集仅应用于教育目的;在反歧视方面投入更多专家资源;修订电子通信隐私法案。 如今,大数据发展战略在美国已经形成了全体动员的格局,大数据已成为美国国家创新战略、国家安全战略、国家ICT产业发展战略以及国家网络安全战略的跨界领域,美国实际上已经确立了基于大数据的信息网络安全战略,目的在于解决当前的大数据核心技术挑战,全面强化未来的信息网络安全战略优势。 第四站:英国 大数据的积极拥抱者 可以说,英国是大数据的积极拥抱者。无论是政府、研究机构,还是企业,都已经开始行动,抢占“数据革命”先机。早在2011年11月,英国政府就发布了对公开数据进行研究的战略政策。英国将大数据列为战略性技术,给予高度关注。英国政府紧随美国之后,推出一系列支持大数据发展举措。 首先是给予研发资金支持。英国政府通过利用和挖掘公开数据的商业潜力,为英国公共部门、学术机构等方面的创新发展提供“孵化环境”,同时为国家可持续发展政策提供进一步的帮助。2013年1月,英国政府向航天、医药等8类高新技术领域注资6亿英镑研发,其中大数据技术获得1.89亿英镑的资金,是获得资金最多的领域。 其次是促进政府和公共领域的大数据应用。为了便于公众理解和判断,英国政府专门建立了“数据英国”网站,将公众关心的政府开支、财务报告等数据整理汇总并发布在互联网上,并对其中的热点议题和重要开支进行进一步阐释,并对公众意见进行反馈。其效果也是明显的。据测算,通过合理、高效使用大数据技术,英国政府每年可节省约330亿英镑,相当于英国每人每年节省约500英镑。 第五站:澳大利亚 理念与行动同时践行 在南半球的澳大利亚自2009年开始积极应用开放数据的理念和行动践行开放政府的愿景和目标。Data.gov.au是政府信息目录的开放数据平台,用户可以在该网站上简便地搜索、浏览和利用澳政府国家、地区政府的公共数据,政府鼓励所有用户通过更新工具和应用从信息中得到实惠。澳大利亚政府数据开放通过5个阶段将数据开放流程化,这5个阶段依次是:发现数据——过程处理——授权许可——数据发布——数据完善。 2010年,澳大利亚联邦政府通过了超级国家宽带网工程,该工程的目标是将光纤电缆通向各家各户,让每个家庭享受每秒钟1G的速度。部分海外测试显示,全国宽带网络将覆盖全澳93%的用户,剩余的7%可使用速度相对较慢的无线和卫星网络。这项计划在2013年底结束。 2013年8月澳大利亚政府信息管理办公室发布了《公共服务大数据战略》,旨在推动公共行业利用大数据分析进行服务改革,制定更好的公共政策,保护公民隐私,使澳大利亚在该领域跻身全球领先水平。 【结语】 大数据释放出的巨大价值,几乎给每个行业都带来了颠覆:大数据很忠诚,它真实记录人们的每个足迹,深藏功与名;大数据很任性,它的分析有根有据,拒绝流言蜚语;大数据很友好,它提供各种权威参考,它创造绿色经济,让我们的生活更美好。世界已经进入由数据主导的“大时代”。 产业革命4.0由大数据引领,这不是预言,而是各国布局国家乃至地区发展的重要国家战略。最近发布的报告显示,全球大数据技术及服务市场复合年增长率(CAGR)将达31.7%,2016年收入将达238亿美元,其增速约为信息通信技术(ICT)市场整体增速的七倍之多。在广大现有和新兴细分市场中,大数据市场融合技术与服务,正形成迅猛的发展势头。 本文转自d1net(转载)

优秀的个人博客,低调大师

盘点欧洲五大智慧城市典范

说到智慧城市,欧洲是世界上其他城市学习的典范。欧洲城市往往人口更稠密,公共交通更完善,对自行车和步行投入更多,更重视可持续性和低碳的解决方案。而且,可能最重要的是,欧洲文化和欧洲公民更致力于建设可持续性更强和更智慧城市的进程。当然,这只是概括而言:这一系列的地区排名报告已经表明了这些城市在全球范围内的领先状况。 哥本哈根、维也纳、巴塞罗那、伦敦、阿姆斯特丹……这些欧洲地区的城市正在采用新的技术与模式,来推进智慧城市战略的实施。 为什么这五大城市被奉为欧洲智慧城市典范? 从这些城市的建设案例来看,可以发现:物联网技术如何在城市发展中实现落地应用;传感器如何采集交通与污染数据;众筹、众包、共享等模式如何调动居民的参与热情;去中心化的能源模式如何降低能耗……智慧城市的话题如此之大,但这些案例能够提供窥斑见豹的一种视角。 什么是智慧城市? 智慧城市是集合了人类和技术的城市网络,使人类能够更好地工作、生活,拥有更高的效率、便利性和生活质量。 这些城市旨在实现自我可持续发展,利用创新技术进行能源和资源的智能交换,从而使其对环境的影响最小化。同时,智慧城市通过ICT(信息通信技术)和物联网将居民连接起来,使居民实现自我决策,从而改善日常生活质量。 以下是一些最成功的欧洲智慧城市,让我们一起看看他们是如何改变城市环境的。 1.哥本哈根 哥本哈根被认为是智慧城市中最智慧的城市,人均碳排放量世界最低。哥本哈根将来自手机、公共汽车GPS系统、下水道和公共垃圾桶中的传感器的无线数据连接起来,旨在进行有效的废物管理和短途出行管理,以进一步减少城市的碳排放量。 同样,该城市建立了旨在减少空气污染的孵化器——哥本哈根解决方案实验室(Copenhagen Solutions Lab)。例如,该实验室的智能停车项目使得司机可以用APP找到停车位,而不是单纯地开车兜圈子,从而增加废气排放和造成不必要的拥堵。 2.维也纳 通过公共与私营组织TINA Vienna,近几年来奥地利一直在大力推行智慧城市战略。其中,最成功的项目是“市民太阳能电厂”。维也纳市政府与地方能源供应商Wien Energy合作,采用居民众筹模式,居民购买一半或整个太阳能电池板,然后由Wein Energie出租,最终该能源公司会购买所有太阳能电池板。 在一些建筑上也可以看到生物太阳能屋顶技术的应用:结合了太阳能和绿植生长的绿色屋顶系统为蜜蜂等传粉者提供栖息地,实现更有效的灌溉,更好地保护屋顶结构,并最终降低建筑本身的能源和维护成本。 3.巴塞罗那 巴塞罗那是一个以具有远见的建筑和设计方法闻名的城市,2000年推出了22@创新区项目,力求将这些优势与数字技术相结合,探索智慧城市的发展。该区域包括五个“知识集群”——信息通讯技术、生物医学、设计、能源和媒体,并寻求新的途径将其结合起来,提供更可持续的城市模式。 利用城市500公里的光缆,22@创新区利用各种传感器来监测噪声和空气污染、交通拥堵以及市民活动,然后分析这些数据,以创造一个充满活力的、有利于环保的生活和工作空间。 4.伦敦 作为世界顶级的绿色城市之一,伦敦正在将相关新技术应用于城市建筑中,如在Crouch Hill建设的能源中心学校,可以吸收更多的二氧化碳,并向附近的家庭提供过剩的能源。建筑能耗占世界能源总消耗量的40%,因此未来的智慧城市需要彻底反思这些能耗是怎么来的。我们可能看到一些非常吸引人的创新技术,例如可以自我修复的细菌水泥、将脚步动能转变为电力的地砖,以及发电电梯等。 又如在斯特拉特福德市的Waitrose,所有的废弃食物都被转化为能源并重回国家电网。 而在Bow地区的BowZed,建筑采用了太阳能和风能发电,因而不需要传统的中央供暖系统。 5.阿姆斯特丹 与哥本哈根相似,阿姆斯特丹也是一个自行车城市,这意味着它是非常绿色的。2009年推出的阿姆斯特丹智慧城市计划涵盖了整个城市的70多个项目,而开源数据则是智慧城市计划的一部分。例如,生活实验室(Living Labs)是各种创新想法的测试平台,其创意有可能会在整个城市推出。 在IJburg新区,他们创建了SmartWork @ IJburg,通过免费的Wi-Fi和当地的协同办公空间,使居民可以在他们的居住区实现远程工作,免去了通勤上下班的麻烦。 The Amsterdam Energy Atlas是另一个项目,旨在测绘城市的能源潜力。荷兰Trinite 公司研发设计的动态智能交通管理平Trafficlink,则将私人和公共交通数据结合起来,为用户提供最新道路信息,帮助用户找到从出发地到目的地的最短路径,从而减少污染排放。 本文转自d1net(转载)

资源下载

更多资源
腾讯云软件源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题,腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构,目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称,一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集,帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring

Spring框架(Spring Framework)是由Rod Johnson于2002年提出的开源Java企业级应用框架,旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念,提供核心容器、应用上下文、数据访问集成等模块,支持整合Hibernate、Struts等第三方框架,其适用范围不仅限于服务器端开发,绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux

Rocky Linux(中文名:洛基)是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版,作为CentOS稳定版停止维护后与RHEL(Red Hat Enterprise Linux)完全兼容的开源替代方案,由社区拥有并管理,支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性,采用模块化包装和SELinux安全架构,默认包含GNOME桌面环境及XFS文件系统,支持十年生命周期更新。

用户登录
用户注册