首页 文章 精选 留言 我的

精选列表

搜索[异构算力],共10000篇文章
优秀的个人博客,低调大师

华为服务器助力全球最大私有Hadoop集群发力大数据

经过几个月的使用和评估,我们决定将华为的FusionServer纳入我们全球采购目录,让华为成为我们的一个主要硬件供应商。所以自2016年初以来,我们在美国,欧洲和亚太地区持续采购华为服务器……华为提供构建强大数据中心所需的全系列产品。我们可以从一个供应商处购买到模块化集装箱、服务器和网络交换机,这一点对我们来说非常有吸引力。 --Matthieu BlumbergCriteo基础设施业务工程总监 客户背景 全球科技公司Criteo成立于2005年,通过在全球范围内进行个性化宣传,为广告客户带来更多的销售。通过自行研发的预测算法,Criteo能够在正确的时间向正确的用户提供关于正确产品的广告。通过测量点击后销售的回报率,Criteo使投资回报率变得透明和易于测量。这是一项由近17万台服务器支持起来的数据密集型业务。 Criteo网络的运营核心,是世界上最大的私有Hadoop平台。这个开源软件框架负责存储"大数据",在商用硬件集群上运行应用程序,支持所有类型数据的海量存储,具有强大的处理能力,理论上可以处理几乎无限数量的并发任务和作业。在Criteo,该平台每天处理的工作多达85,000项。 业务挑战 随着在线零售业的不断普及,Criteo解决方案的需求量大幅增长。处理数据的也不断增加。2015年1月,Criteo开始考虑构建一个新的Hadoop集群。 Criteo基础设施业务工程总监Matthieu Blumberg解释说: "我们通过大数据发现,当我们拥有的数据越多时,想要的也就越多,需要的也就越多。对我们来说,这意味着我们现有的Hadoop集群,相对于现有的需求来说,已经太小了,所以我们决定建立一个新的。这使得我们有机会挑战整个基础架构堆栈领域,并了解其他硬件供应商。" 解决方案 Criteo将请求提案(RFP)发送给六家公司,其中包括了华为和Criteo目前的供应商。根据这些公司的回复情况,Criteo选择了三个候选解决方案进入名单。华为就是在这个时候开始引起Criteo注意的。Matthieu Blumberg继续说道。 "华为对RFP的回应令我们印象深刻。华为显然事先做了足够的功课,他们已经深入地解了我们用Hadoop所做的工作。他们给出的解决方案紧密贴合我们的业务,而且还针对服务器的电源提供了替代方案,这清楚地表明他们完全了解Hadoop集群是如何运行的。" 华为提供的解决方案基于新一代2U双插槽机架式服务器FusionServer开发完成。该解决方案提供灵活的资源扩展能力以及强大的计算性能,是互联网,大数据,云计算和关键企业应用的理想选择。 在评估过程中,Criteo从三家供应商中分别购买了十台服务器,并在每组中建立了一个小型Hadoop集群,进行性能对比。这个标杆活动评估了设备性能,Linux功能,电源使用和驱动程序支持。最后华为得分超过其他供应商,因此Criteo选择了华为。Matthieu Blumberg补充说: "FusionServer超过了我们设定的所有标准。但是真正令我们印象深刻的是华为愿意帮助我们,愿意回答我们的问题。例如,我们想要深入检查系统的硬盘,其他供应商不准备让我们这么干,但是华为给我们提供了支持。短短几天之内,华为就向我们提供了检测所需要的工具。" 客户收益 与其他厂商产品相比较,FusionServer提供了最高的硬盘驱动器密度,每台服务器支持16块硬盘,比最接近的厂商多一块。功耗却比其他厂商低20%,优势明显。关键的是Criteo现在可以用合适的价格提供客户所需要的所有服务。 "经过几个月的使用和评估,我们决定将华为的FusionServer纳入我们全球采购目录,让华为成为我们的一个主要硬件供应商。所以自2016年初以来,我们在美国,欧洲和亚太地区持续采购华为服务器。"Matthieu Blumberg说。 展望未来,Criteo认为,现代化数据中心运行需要许多设备的支持,而华为已经被Criteo视作一个潜在主要供应商。Criteo已经购买了更多的网络设备,Matthieu Blumberg总结说: "华为提供构建强大数据中心所需的全系列产品。我们可以从一个供应商处购买到模块化集装箱,服务器和网络交换机,这一点对我们来说非常有吸引力。" 原文发布时间为:2017年8月8日 本文来自云栖社区合作伙伴至顶网,了解相关信息可以关注至顶网。

优秀的个人博客,低调大师

淮北市政府网站借力智慧城市再升级

近日,市政府办公室(法制办)以智慧城市建设为契机,依托市级云计算中心,完成了市政府门户网站和政务公开网整站迁移,目前两网服务器顺利迁移至淮北政务云平台。 淮北政务云平台采用了先进的云计算虚拟化架构,分布式规划各服务计算资源,实现了各部门系统互联互通,为全市智慧城市项目系统建设夯实基础。 据了解,两网整站迁移一次启用13台云主机、5个公网IP,总出口带宽100兆以上,解决了原有网站平台数据存储空间不足、安全防御手段单一、安全审计不到位等诸多问题。与此同时,新平台分离了市本级和各县区政务公开前后台服务器,同时搭建起全市网站群管理平台,有效推动了全市政府网站群集约化试点建设。通过政务云平台统一构建的IP防火墙、WEB防火墙、出入审计等多重的安全防护体系,切实提高了两网防篡改、防病毒、防攻击的能力。目前新平台正安全、平稳、有序运行。 ====================================分割线================================ 本文转自d1net(转载)

优秀的个人博客,低调大师

为了提高生产力 微软现在能让你用语音写Word了

微软语音输入软件Dictate 北京时间6月21日早间消息,微软近期发布了一款名为Dictate的新应用。这是面向Word、Outlook和Powerpoint等软件的插件,利用Cortana的语音识别技术帮你进行语音输入。 微软并不是开发听写技术的首家公司。Nuance的语音输入软件Dragon已发布至桌面和移动设备。去年,谷歌也在Docs应用中加入了更多语音输入功能。 Office此前已支持语音转换文本的功能,但Dictate还带来了更多新功能。Dictate支持20多种语言,并且可以通过多种命令对文字进行编辑。只要简单地说“换行”、“删除”和“停止听写”,用户就可以操纵光标,使用语音来修正文字。此外,语音命令也可以方便地管理标点符号。 另一项功能是实时翻译。只需调整其中的某些设置,Dictate就可以在用户口述过程中完成翻译。例如,用户可以说西班牙语,而键入的文字将自动翻译成法语。听写支持的20种语言可以翻译成60多种其他语言。 目前,Dictate已发布至32位和64位版的Office,而系统最低要求是Windows 8.1。用户可以免费下载这款软件,不过考虑到这是个属于微软Garage的项目,因此尚不清楚未来前景如何。 本文转自d1net(转载)

优秀的个人博客,低调大师

加速企业级大数据方案落地 IBM聚力发挥Spark优势

大数据技术在近些年得到了长足发展,大数据软件框架Hadoop的快速兴起引领了大数据的行业潮流。作为一种类Hadoop的新计算框架,Spark自2014年从Apache中孵化出来后,在短短两年的时间中为大数据技术赋予了新的活力,这一基于内存的分布式计算框架已经在众多行业得到应用。 随着2.0版本的新近发布,Spark向大数据市场展现了其性能提升空间,其在Streaming概念上的进一步强化为实时流处理及查询加载了更强的保障。在大数据领域,Spark逐渐成熟,正在走向更多行业、更多企业。 面对这一逐渐强大的数据计算架构,IBM着力发展Spark项目,将其定位于数据分析的操作系统,并基于Spark构建IBM数据分析产品的整个体系。IBM对Spark的“押宝”,可以从社区贡献、产品搭建、人才教育、创新应用四个维度予以解读。 贡献社区、搭建产品 IBM与Spark互利共进 2015年,IBM成立了Spark技术中心(STC,Spark Technology Center),专注于Spark解决方案的提升及技术交流,针对Spark内核、Spark Streaming、SparkML和SparkR打造集合专家、提交者和贡献者的社区。在短短的1年时间里,IBM通过这一技术中心为Spark社区贡献约800个JIRA,并提供了Spark认证,进一步鼓励基于Spark的开发。目前,IBM在Spark社区致力于推进Spark SQL、SparkML,Benchmark及 Swift对象存储。此外,IBM将其机器学习框架SystemML贡献于Apache社区,使其作为 Apache的孵化器项目,为机器学习用户快速优化算法和模型。 开源领域新兴成果层出不穷,然而从技术代码到企业级应用、从开发成果到企业级产品的历程,仍然存在着一段距离。除贡献于Spark社区,IBM同时基于Spark构建自身的产品及服务,辅助企业将开源成果转化为其能够良好应用的IT产品和服务,提升企业对开源的应用体验。 基于Spark组件,IBM提供了多方面的大数据解决方案,包括BigInsights、数据科学体验(Data Science Experience)、dashDB数据仓库及Spark即服务(Spark as a Service)等。Spark即服务将Spark产品以云服务的方式直接交付,并在此过程中赋予其更高的安全性、数据存储能力及多租户特性。在IBM自身的解决方案上,IBM基于Spark提供面向分析的数据引擎,将传统的单机核心引擎通过Spark改造成分布式,并在Watson分析等领域以更高的性能、更分布的方式对数据进行分析和处理。在针对Spark的集成方面,IBM将数据直接复制到Spark上开展分析,提供了SPSS建模模块和分析服务器、Cloudant NoSQL数据库、InfoSphere Streams流分析等解决方案。 除在软件和服务层面实现对Spark的支持,IBM在硬件架构层面也利用Power Systems提升Spark的性能。基于内存的Spark采用数据集中式的分析,能够充分利用Power芯片的优势。在实际测试与应用案例中,运行在Power上的Spark性能达到了x86方案的两倍。未来,IBM将以更多Spark相关的产品,服务更多企业客户的大数据分析需求。 培养人才、创新应用 IBM推进大数据的社会利用 大数据领域,人才是最为重要的资产。面向市场对数据科学家、数据分析师、数据工程师、数据架构师等不同角色的大数据人才的需求,IBM成立了数据科学学院,从大数据专业技能、社区互动、联合项目和大数据创业孵化器几个方面推进大数据人才的培养、成长。这一公益组织在IBM发起的“大数据大学”平台上提供免费的课程,通过开设Hadoop、Spark、R、机器学习等课程,提升大数据人才专业技能。大数据大学针对不同的学习目标配备了专门的学习路径,在全球网站和中文网站上提供数据工程、数据分析学习的免费课程。在这一平台上,学习者、数据科学家、数据工程师不仅可以增进自身的理论知识,还可以通过利用R语言、Spark集群,开展数据清洗、分析、可视化操作等实践,以实践检验真理。 此外,在大数据社区中,IBM发起了多样的交互活动,包括大数据峰会、Spark大赛等。以Spark大赛为例,IBM目前正在开展的全球Spark大赛得到了中国区的近20个参赛方案,激发了本地的创新火花。通过免费的方式和合作伙伴、孵化器企业合作,为提供技术支持,从而使得Spark等大数据解决方案在各行各业落地,开展服务。 最近,IBM正在基于Spark开展创新项目,充分发挥Spark的作用。在智能交通领域,IBM通过采集物联网数据,并在Spark Streaming上对大众出行数据进行处理过滤、去噪、数据标准化等,建立了基于Spark的数据模型,实时分析人口聚集、流动情况,以预测交通拥堵情况,为交通管理部门和运维部门采取管制措施提供参考,并进一步提高公众的出行体验。此外,IBM对Spark的创新应用还为天气预测提供了提升的解决方案。未来,IBM将继续结合Spark的大数据能力及多方参与的互动机制,为大数据在企业的应用搭建桥梁。 本文转自d1net(转载)

优秀的个人博客,低调大师

政企多样化发力 社区半径引领智慧社区生态建设

近年来,我们越来越多地听到智慧城市的概念,各类新闻报道中也不乏众多一线、二线城市布局建设智慧城市的消息。自2012年我国提出智慧城市试点以来,国务院、国家发改委、工信部、住建部等部门相继推出促进智慧城市健康有序发展的政策、措施和试点示范。未来的智慧城市到底是什么样子?目前飞速发展的互联网、移动互联网等信息技术是否已经足以为其提供强有力的技术驱动? 据不完全统计,截至2015年年底,我国95%的副省级以上城市、76%的地级城市,总计约500多个城市提出或在建智慧城市。去年,经国务院同意,发改委、科技部等八部委联合印发的《关于促进智慧城市健康发展的指导意见》也明确指出:到2020年,将推动建成一批特色鲜明的智慧城市,充分发挥极具辐射和带动作用,在保证和改善民生服务,创新社会管理,维护网络安全等方面要取得显著成效。作为智慧城市中的重要组成部分,智慧社区的建设也进行的如火如荼。 在社会大发展的进程中,社区的自然形成以及人为的组织建设是十分重要的组成部分,满足社区居民的需求更是社区服务的重点目标。随着信息技术的发展,社区居民的需求也在逐渐改变。“智慧社区”正是基于此的一种理念思考,也是新形势下探索公共治理的一种新模式,即以构建人性化环境为基础,充分应用互联网技术,以保障社区安全、提供综合社区信息服务、智能家居以及物业管理智能化。 传统物业公司作为社区管理服务的提供者,其服务能力与新时代业主的需求已经出现明显断档,亟需转型变革以应对互联网+时代的冲击和挑战。新的挑战必将带来新的机遇,对于传统物业公司来说,目前最紧迫的课题莫过于“赋能”和“减员增效”,即实现软硬件迭代更新等基础物管的互联网升级,并进一步探索社区多样化经营,以达到降低成本、提高效率、增加收入的效果。 传统物业行业的瓶颈也让众多互联网公司看到了新的发展契机,纷纷开始布局互联网+物业的业务格局,其中,北京社区半径信息技术有限公司基于互联网公司的技术研发优势、商业的运营服务思维以及互联网强大的资源整合能力,从“赋能”和“减员增效”入手,已经帮助近百家物业公司成功实现社区服务转型,打造更加便捷、安全的社区环境。 在社区半径与物业深度结合的智慧化社区解决方案中,既包括物管系统“半径管家”(PC+APP)、业主APP“社区半径”,也有智能门禁、NFC支付等智能硬件,可以帮助物业公司实现智能门禁、公告、报事报修、缴费等物业基础服务,并连接社区周边的商业服务,进一步构建基于社区的互联网生态系统。 互联网技术的发展不仅改变了人们的生活方式,也促使传统行业产生更强的变革动力。社区的智能化发展趋势已经明晰,如果把单向的、针对物的管理的智慧化社区模式定义为1.0的话,那么业主之间、业主与物业、业主与周边商业的互动生态则可以称为智慧社区的2.0时代——云计算、移动互联网、大数据、智能硬件、机器学习等领域的新技术得到长足发展,并通过社区服务提供商在社区应用中开始逐步落地。 社区半径 北京社区半径信息技术有限公司成立于2014年,由阿里巴巴前副总裁等高管创立。社区半径致力于提供一整套与物业深度结合的智慧化社区解决方案,包括社区物业管理运营平台、物联网智能社区平台以及社区O2O电子商务平台。社区半径同时是社区生活服务平台提供商,为物业公司开展社区生活服务经营提供技术、资源以及运营支持。 本文转自d1net(转载)

优秀的个人博客,低调大师

持续发力Web技术 英特尔驱动万物智能互联

英特尔Web技术媒体沟通会今天举行,展示了英特尔在Web技术方面的最新成果。当下,云和数据中心、物联网、存储、FPGA以及5G形成增长的良性循环,带来前所未有的创新机遇,英特尔借助增长的良性循环,不断突破科技疆界,驱动万物智能互联。在这一使命的指引下,英特尔软件与服务事业部立于科技前沿,持续带来创新成果,为合作伙伴提供创新基础,并有力推动着中国的“大众创业万众创新”进程,这次媒体沟通会进行了充分而生动的展示。 面向WebRTC的英特尔协同通信开发套件(Intel Collaboration Suite for WebRTC)在媒体沟通会上受到广泛关注,它面向快速增长的实时通信市场,可应用于高端会议、协同通信、在线医疗及教育、互联网社交娱乐等多个领域。这款开发套件能让开发者把高性能实时通信功能快速融入产品,降低了创新门槛,加速了创新进程,是运行和支持大并发量实时音视频应用开发的理想平台。中国视频行业领军者之一的爱奇艺已经应用这项技术,爱奇艺副总裁刘文峰在沟通会上介绍了采用英特尔协同通信开发套件的进展以及由此带来的收获,并对双方的合作给予高度评价。 广受创客和开发者欢迎的英特尔 物联网服务融合开发套件(IntelIoT Services Orchestration Layer),在媒体沟通会上吸引了众多目光。物联网技术和市场正在高速发展,英特尔通过提供开源的物联网服务融合开发套件,帮助创客和开发者在广泛的体验和开发技能上实现创新。英特尔物联网服务融合开发套件是推动“大众创业万众创新”的利器,已被第九届全国大学生软件创新大赛选为主要工具。作为此次大赛决赛阶段的代表,天津大学软件学院院长助理章亦葵副教授对英特尔物联网服务融合开发套件的技术特点和性能极为赞赏,并对它在促进大学生创新方面的作用深表赞同。 Java引擎优化技术也是媒体沟通会上的一个焦点。Java是Web的核心语言,在物联网、客户端以及服务器等领域居于发展的关键地位,Java引擎优化技术为包括物联网设备在内的各种平台提供支持,帮助开发者探索更具创新力的解决方案,为用户提供最佳使用体验。阿里巴巴YunOS目前正在使用这项优化技术。YunOS虚拟机团队负责人徐伟刚也在会上进行了主题分享。未来,YunOS也将与Intel持续合作,接入更广泛的智能硬件,并共同推动IoT的Web标准落地。 本次媒体沟通会展示了英特尔软件与服务事业部在前沿科技方面的不懈努力,英特尔公司软件与服务事业部副总裁兼系统技术及优化部门总经理MichaelGreene表示:“创新永远都是进行时,作为跨越无数创新领域的驱动者,英特尔不断探寻新的增长点,将在多个领域持续寻求突破。 沟通会期间,多款基于英特尔软件及Web的技术及新品展出,让更多人感受软件技术的魅力所在,新品信息如下: 使用面向WebRTC的英特尔协同通信开发套件实现互动直播 互动直播是直播行业下一个热点。开发人员可以使用面向WebRTC的英特尔协同通信开发套件轻松实现互动直播功能,且具有直播画面高度定制、直播终端支持范围广、直播延迟低等特点,体现了直播技术发展的新方向,可满足泛娱乐直播与行业直播模式创新的要求。 热聊-爱奇艺* 企业协同办公工具 热聊音视频单聊与群聊功能由英特尔WebRTC团队与爱奇艺团队共同打造的Hydra基础架构所支撑,极大改善爱奇艺日常项目沟通管理效率。Hydra基础架构由英特尔VisualCompute Accelerator (Intel VCA) 提供硬件加速,实现不仅支持企业级应用,更为海量用户提供互联网音视频应用服务。 为英特尔可穿戴设备提供Java开发套件 Java脚本语言因为其适用范围广编程门槛低等特点,已经成为了最流行的编程语言之一.现在我们将Java也引入可穿戴设备的领域.通过在英特尔可穿戴设备中集成Java运行环境,以及提供一整套开发套件,开发者可以很方便的使用Java编写运行在可穿戴设备中的程序,并很容易的发布自己的作品.这将极大的缩短应用程序的开发和发布流程。 英特尔 物联网服务融合开发套件 英特尔 物联网服务融合开发套件将帮助开发者迅速开发和发布物联网应用. 该套件提供一个基于浏览器的图形编程集成开发环境,开发者只需要通过拖拽控件,无需书写任何代码,就可以创建工作流以及所见即所得的UI界面.该套件会自动发现同一网络下的物联网设备并负责各设备的通信互联,开发者只需关注物联网应用的主逻辑,摆脱了传统开发需要在设备通信花费大量时间的困扰.套件还提供了应用市场,开发者可以快速发布自己的应用或者下载所需的模块。 本文转自d1net(转载)

资源下载

更多资源
Nacos

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称,一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集,帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring

Spring框架(Spring Framework)是由Rod Johnson于2002年提出的开源Java企业级应用框架,旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念,提供核心容器、应用上下文、数据访问集成等模块,支持整合Hibernate、Struts等第三方框架,其适用范围不仅限于服务器端开发,绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux

Rocky Linux(中文名:洛基)是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版,作为CentOS稳定版停止维护后与RHEL(Red Hat Enterprise Linux)完全兼容的开源替代方案,由社区拥有并管理,支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性,采用模块化包装和SELinux安全架构,默认包含GNOME桌面环境及XFS文件系统,支持十年生命周期更新。

WebStorm

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源,继承了IntelliJ IDEA强大的JS部分的功能。

用户登录
用户注册