《Scala机器学习》一一3.1　安装Spark-低调大师

《Scala机器学习》一一3.1　安装Spark

2017-08-01 642

3.1　安装Spark
如果读者还没有安装过Spark，可从http://spark.apache.org/downloads.html下载预先编译好的Spark包。在写本书时的发布版本为1.6.1。

图3-1　本章建议的下载链接http://spark.apache.org/downloads.html
读者也可通过下面的链接下载完整的源代码来构建Spark：

命令将下载必要的依赖并在Spark目录中创建spark-2.0.0-SNAPSHOT-bin-alex-spark-build-2.6-yarn.tgz文件，其版本是2.0.0，这是在写本书时最新的发行版本。一般来说，如果不是对最新功能感兴趣，不建议从主分支进行构建。如果需要一个发行版本，可以从相应标签迁出（checkout）。通过git branch -r命令可以获得有效版本的

微信关注我们

原文链接：https://yq.aliyun.com/articles/174366

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

华为FusionServer 2288H V3服务器TPCx-BB测试排名第一

[中国，深圳，2017年1月18日]近日，业界权威的标准性能评测机构TPC发布了TPC Benchmark Express-BigBench(TPCx-BB)@3000的最新测试结果，华为FusionServer 2288H V3 服务器在测试中排名第一。 TPCx-BB是国际标准组织TPC制定的性能基准测试标准（华为香农实验室是此标准的制定参与方之一），是衡量基于Hadoop的大数据系统性能的重要指标之一，其发布的测试排名在工业和商业领域中具有很大的影响力。TPCx-BB测试通过模拟零售商的30个应用场景，执行30个查询算法来衡量基于Hadoop大数据系统的服务器软硬件性能，其中一些场景还用到了当前热门的机器学习算法，如K-Means、Naive Bayes等。TPCx-BB的测试结果，可以全面准确的反映端到端的大数据系统的整体运行性能。 TPCx-BB绩效指标，不仅含服务器的性能，也含服务器的价格/性能比。华为FusionServer 2288H V3服务器在TPCx-BB@3000的测试中，性能指标BBQpm@3000为611.31，价格/性能比指标$/BBQpm@3000为46...

2017-08-01

646

大数据是企业服务市场中的新兴领域，短短几年时间，大数据概念从兴起到落地，开始在各行各业发挥作用，行业政策频出，技术飞速发展，受到资本追捧。整个大数据行业可大致分为三层，底层基础平台，中间层通用技术，上层行业应用。接下来，爱分析将按照上述分类，逐步介绍各细分领域的行业现状、未来前景。今天是大数据系列的第一篇——底层基础平台。底层基础平台主要解决的是数据存储、计算的问题，是整个大数据生态的基石。采集到的数据，首先要能高效、快捷地存起来，才能进行数据分析和数据挖掘。这一层非常重要，同时也是技术含量最高的一层。以底层技术中明星Hadoop为例，用Hadoop的公司很多，能做Hadoop发行版的公司凤毛麟角。底层基础平台细分领域里的大数据公司众多，有专注Hadoop发行版的星环科技、红象云腾和天云大数据，有传统数据库厂商人大金仓和南大通用，有研发新型分布式数据库的巨杉数据库，还有唯一来自中国的Apache社区顶级项目Kylin背后公司Kyligence。这里面最受人关注的Hadoop以及由此衍生的公司，接下来爱分析为您重点阐述国内外Hadoop生态的现状。 Hadoop兴起的原因：便宜...

2017-08-01

608

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。