首页 文章 精选 留言 我的
优秀的个人博客,低调大师

微信关注我们

原文链接:https://yq.aliyun.com/articles/406646

转载内容版权归作者及来源网站所有!

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Apache Spark GraphX的体系结构

1. 整体架构 GraphX 的整体架构如图 1所示可以分为三部分。 图 1 GraphX 架构 存储和原语层 Graph 类是图计算的核心类。内部含有 VertexRDD、 EdgeRDD 和RDD[EdgeTriplet] 引用。 GraphImpl 是 Graph 类的子类实现了图操作。 接口层在底层 RDD 的基础之上实现了 Pregel 模型 BSP 模式的计算接口。 算法层基于 Pregel 接口实现了常用的图算法。包括 PageRank、 SVDPlusPlus、TriangleCount、 ConnectedComponents、 StronglyConnectedConponents 等算法。 2. 存储结构 在正式的工业级的应用中图的规模极大上百万个节点是经常出现的。为了提高处理速度和数据量希望能够将图以分布式的方式来存储、处理图数据。图的分布式存储大致有两种方式边分割 Edge Cut和点分割 Vertex Cut如图 2所示。最早期的图计算的框架中使用的是 Edge Cut边分割的存储方式。而 GraphX 的设计者考虑到真实世界中的大规模图大多是边多于点的...

入局汽车市场35年后,德州仪器在华发布下一代汽车系统半导体技术方案

10月17日,德州仪器(TI)在京举办的推动汽车系统发展与创新媒体交流会上,TI全球汽车系统业务总监Heinz-Peter Beckemeyer向包括雷锋网·新智驾在内的十余家媒体表示,站在下一个汽车产业变革的风口,德州仪器将在赋能全球汽车电子产业发展的市场中做得更多。 *TI全球汽车系统业务总监Heinz-Peter Beckemeyer (右)和TI中国区汽车事业部总经理 沈源(左) “TI在汽车行业拥有35年的经验,”Beckemeyer如是说,“TI专注于高级驾驶辅助系统、车身电子元件、信息娱乐系统以及混合动力汽车(HEV)、电动汽车(EV)和传动系统,帮助汽车制造商实现系统优化,满足消费者需求,并不断研发出具有更高性能和功能水平的汽车技术。” 了解TI的人会知道,这个战略的发布并非多么大跨步的跃进。 大约在35年前,美国老牌半

相关文章

发表评论

资源下载

更多资源
Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

Oracle

Oracle

Oracle Database,又名Oracle RDBMS,或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统,系统可移植性好、使用方便、功能强,适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的、适应高吞吐量的数据库方案。

Apache Tomcat

Apache Tomcat

Tomcat是Apache 软件基金会(Apache Software Foundation)的Jakarta 项目中的一个核心项目,由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定,而且免费,因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可,成为目前比较流行的Web 应用服务器。

JDK

JDK

JDK是 Java 语言的软件开发工具包,主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心,它包含了JAVA的运行环境(JVM+Java系统类库)和JAVA工具。