Windows端部署Scala2.10.5开发环境

2017-11-20 721

应用场景

如果没有服务器环境，可以在本地搭建Scala开发环境，单机版，然后安装IDE编程工具，就可以在本地机器上进行scala程序的开发！

操作步骤

1. 首先安装jdk1.8 配置环境变量等

jdk1.8下载地址

2. 安装scala环境，配置环境变量（2.10.5）

scala2.10.5下载地址

3. 安装spark，配置环境变量（spark1.6.1）

spark1.6.1下载地址

4. 安装hadoop，配置环境变量（hadoop2.6.0）

hadoop2.6.0下载地址

5. 安装scala IDE （2.12）

scala IDE2.12下载地址

重要提示

注意：
这里需要注意一点，scala版本必须是2.10.5，因为spark中也有scala，是2.10.5版本的，而使用IDE的时候，需要引入spark包，所以如果scala单独环境如果不是2.10.5，那么会提示scala版本不一致的错误，很麻烦！

切记: 环境装完之后，启动scala IDE，配置build path，导入spark包，然后写程序！
上面所有组件，只需要解压后，配置环境变量即可！

微信关注我们

原文链接：https://yq.aliyun.com/articles/625643

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Flume部署安装详细图文步骤(单节点)

步骤一：flume的下载当然，这里也可以使用wget命令在线下载，很简单，不多说。步骤二：flume的上传 [hadoop@djt002 flume]$ ls apache-flume-1.6.0-bin apache-flume-1.6.0-bin.tar.gz [hadoop@djt002 flume]$rm apache-flume-1.6.0-bin.tar.gz [hadoop@djt002 flume]$ ls apache-flume-1.6.0-bin [hadoop@djt002 flume]$mv apache-flume-1.6.0-bin/ flume-1.6.0 [hadoop@djt002 flume]$ clear [hadoop@djt002 flume]$ 步骤三：flume的配置 [root@djt002 flume]#vim /etc/profile #flumeexport FLUME_HOME=/usr/local/flume/flume-1.6.0export FLUME_CONF_DIR=/usr/local/flume/...

2017-11-20

603

生成的结果，作为输入源。代码 package zhouls.bigdata.myMapReduce.ParseTVDataCompressAndCounter; import java.net.URI; import java.util.List; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.conf.Configured; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoop.fs.Path; import org.apache.hadoop.io.LongWritable; import org.apache.hadoop.io.Text; import org.apache.hadoop.io.compress.GzipCodec; import org.apache.hadoop.mapreduce.Job; import org.apache.hadoo...

2017-11-20

507

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。