admin 管理员组

文章数量: 1086019


2024年4月16日发(作者：border bottom color)

Spark Windows 调试环境搭建教程

本教程介绍的是Windows环境下的Spark调试环境的搭建步骤。

一、组件介绍

首先列举搭建此环境需要的各个组件：

•

JDK，安装JDK 6或者JDK 7（必备条件）

•

IDEA，有两个版本：Ultimate Edition & Community Edition，后者是free的，

而且完全能满足学习者所有的需求

•

Scala，Spark是用Scala语言写成的，在本地编译执行需要这个包

•

SBT，scala工程构建的工具

•

Git，IDEA自动下载SBT插件时可能会用到的工具

二、安装步骤

1、安装Scala。（建议2.10.2版本）

完成后，在windows命令行中输入scala，检查是否识别此命令。

如果不识别，查看环境变量Path中是否有....scalabin（我的电脑右键，属性 -> 高

级系统设置 -> 环境变量）,没有的手动将Scala文件夹下的bin目录的路径

Scala 2.10.2已亲测可行。

2、安装SBT

运行SBT的安装程序，运行完成后，重新打开windows命令行，输入sbt，检查是

否识别此命令。没有的话，手动配置环境变量，添加...sbtbin

运行完SBT的安装程序之后，并不意味着完成了sbt的安装，在windows命令放下

输入sbt后，SBT会自动的下载安装它所需要的程序包，请耐心等待全部下载成功。

3、安装Git

运行Git的安装程序，安装完成后，重新打开windows命令行，检查时候识别git

命令。

4、安装IDEA、安装IDEA的Scala插件

打开IDEA，在‘Welcome to IntelliJ IDEA’界面的‘Quick Start’栏，点击

Configure，选择Plugins。

在弹出的窗口中可以看到已安装的插件，现在IDEA默认还没有Scala的插件。需要

点击左下角的Install ，在搜索框中输入‘scala’，点击安装。安装完


本文标签： 安装 插件 环境 识别

版权声明：本文标题：Spark Windows调试环境搭建教程 内容由网友自发贡献，该文观点仅代表作者本人， 转载请联系作者并注明出处：http://www.roclinux.cn/p/1713222649a624657.html， 本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容，一经查实，本站将立刻删除。