《Scala机器学习》一一3.1　安装Spark-低调大师

《Scala机器学习》一一3.1　安装Spark

2017-08-01 594

3.1　安装Spark
如果读者还没有安装过Spark，可从http://spark.apache.org/downloads.html下载预先编译好的Spark包。在写本书时的发布版本为1.6.1。

图3-1　本章建议的下载链接http://spark.apache.org/downloads.html
读者也可通过下面的链接下载完整的源代码来构建Spark：

命令将下载必要的依赖并在Spark目录中创建spark-2.0.0-SNAPSHOT-bin-alex-spark-build-2.6-yarn.tgz文件，其版本是2.0.0，这是在写本书时最新的发行版本。一般来说，如果不是对最新功能感兴趣，不建议从主分支进行构建。如果需要一个发行版本，可以从相应标签迁出（checkout）。通过git branch -r命令可以获得有效版本的

微信关注我们

原文链接：https://yq.aliyun.com/articles/174366

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

华为FusionServer 2288H V3服务器TPCx-BB测试排名第一

[中国，深圳，2017年1月18日]近日，业界权威的标准性能评测机构TPC发布了TPC Benchmark Express-BigBench(TPCx-BB)@3000的最新测试结果，华为FusionServer 2288H V3 服务器在测试中排名第一。 TPCx-BB是国际标准组织TPC制定的性能基准测试标准（华为香农实验室是此标准的制定参与方之一），是衡量基于Hadoop的大数据系统性能的重要指标之一，其发布的测试排名在工业和商业领域中具有很大的影响力。TPCx-BB测试通过模拟零售商的30个应用场景，执行30个查询算法来衡量基于Hadoop大数据系统的服务器软硬件性能，其中一些场景还用到了当前热门的机器学习算法，如K-Means、Naive Bayes等。TPCx-BB的测试结果，可以全面准确的反映端到端的大数据系统的整体运行性能。 TPCx-BB绩效指标，不仅含服务器的性能，也含服务器的价格/性能比。华为FusionServer 2288H V3服务器在TPCx-BB@3000的测试中，性能指标BBQpm@3000为611.31，价格/性能比指标$/BBQpm@3000为46...

2017-08-02

606

大数据是企业服务市场中的新兴领域，短短几年时间，大数据概念从兴起到落地，开始在各行各业发挥作用，行业政策频出，技术飞速发展，受到资本追捧。整个大数据行业可大致分为三层，底层基础平台，中间层通用技术，上层行业应用。接下来，爱分析将按照上述分类，逐步介绍各细分领域的行业现状、未来前景。今天是大数据系列的第一篇——底层基础平台。底层基础平台主要解决的是数据存储、计算的问题，是整个大数据生态的基石。采集到的数据，首先要能高效、快捷地存起来，才能进行数据分析和数据挖掘。这一层非常重要，同时也是技术含量最高的一层。以底层技术中明星Hadoop为例，用Hadoop的公司很多，能做Hadoop发行版的公司凤毛麟角。底层基础平台细分领域里的大数据公司众多，有专注Hadoop发行版的星环科技、红象云腾和天云大数据，有传统数据库厂商人大金仓和南大通用，有研发新型分布式数据库的巨杉数据库，还有唯一来自中国的Apache社区顶级项目Kylin背后公司Kyligence。这里面最受人关注的Hadoop以及由此衍生的公司，接下来爱分析为您重点阐述国内外Hadoop生态的现状。 Hadoop兴起的原因：便宜...

2017-08-02

565

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。