《Scala机器学习》一一3.1　安装Spark-低调大师

《Scala机器学习》一一3.1　安装Spark

2017-08-01 577

3.1　安装Spark
如果读者还没有安装过Spark，可从http://spark.apache.org/downloads.html下载预先编译好的Spark包。在写本书时的发布版本为1.6.1。

图3-1　本章建议的下载链接http://spark.apache.org/downloads.html
读者也可通过下面的链接下载完整的源代码来构建Spark：

命令将下载必要的依赖并在Spark目录中创建spark-2.0.0-SNAPSHOT-bin-alex-spark-build-2.6-yarn.tgz文件，其版本是2.0.0，这是在写本书时最新的发行版本。一般来说，如果不是对最新功能感兴趣，不建议从主分支进行构建。如果需要一个发行版本，可以从相应标签迁出（checkout）。通过git branch -r命令可以获得有效版本的

微信关注我们

原文链接：https://yq.aliyun.com/articles/174366

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

华为FusionServer 2288H V3服务器TPCx-BB测试排名第一

[中国，深圳，2017年1月18日]近日，业界权威的标准性能评测机构TPC发布了TPC Benchmark Express-BigBench(TPCx-BB)@3000的最新测试结果，华为FusionServer 2288H V3 服务器在测试中排名第一。 TPCx-BB是国际标准组织TPC制定的性能基准测试标准（华为香农实验室是此标准的制定参与方之一），是衡量基于Hadoop的大数据系统性能的重要指标之一，其发布的测试排名在工业和商业领域中具有很大的影响力。TPCx-BB测试通过模拟零售商的30个应用场景，执行30个查询算法来衡量基于Hadoop大数据系统的服务器软硬件性能，其中一些场景还用到了当前热门的机器学习算法，如K-Means、Naive Bayes等。TPCx-BB的测试结果，可以全面准确的反映端到端的大数据系统的整体运行性能。 TPCx-BB绩效指标，不仅含服务器的性能，也含服务器的价格/性能比。华为FusionServer 2288H V3服务器在TPCx-BB@3000的测试中，性能指标BBQpm@3000为611.31，价格/性能比指标$/BBQpm@3000为46...

2017-08-02

594

大数据是企业服务市场中的新兴领域，短短几年时间，大数据概念从兴起到落地，开始在各行各业发挥作用，行业政策频出，技术飞速发展，受到资本追捧。整个大数据行业可大致分为三层，底层基础平台，中间层通用技术，上层行业应用。接下来，爱分析将按照上述分类，逐步介绍各细分领域的行业现状、未来前景。今天是大数据系列的第一篇——底层基础平台。底层基础平台主要解决的是数据存储、计算的问题，是整个大数据生态的基石。采集到的数据，首先要能高效、快捷地存起来，才能进行数据分析和数据挖掘。这一层非常重要，同时也是技术含量最高的一层。以底层技术中明星Hadoop为例，用Hadoop的公司很多，能做Hadoop发行版的公司凤毛麟角。底层基础平台细分领域里的大数据公司众多，有专注Hadoop发行版的星环科技、红象云腾和天云大数据，有传统数据库厂商人大金仓和南大通用，有研发新型分布式数据库的巨杉数据库，还有唯一来自中国的Apache社区顶级项目Kylin背后公司Kyligence。这里面最受人关注的Hadoop以及由此衍生的公司，接下来爱分析为您重点阐述国内外Hadoop生态的现状。 Hadoop兴起的原因：便宜...

2017-08-02

554

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Apache Tomcat

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

JDK

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。