window 下安装scala 和 spark，绝对成功！！

刺骨的言语ヽ痛彻心扉 2022-04-12 13:50 277阅读 0赞

安装Scala和spark的坑有点多呀，scala的版本与spark的版本是相关的。

jdk版本最好是：jdk1.8，可能其他版本会不成功

<table style="width:546px;"> 
 <tbody> 
  <tr> 
   <td style="width:158px;"> <h3><strong>jdk（重要）</strong></h3> </td> 
   <td style="width:135px;"> <h3><strong>scala</strong></h3> </td> 
   <td style="width:108px;"> <h3><strong>spark</strong></h3> </td> 
   <td style="width:142px;"> <h3><strong>hadoop</strong></h3> </td> 
  </tr> 
  <tr> 
   <td style="width:158px;"> <h3><strong>1.8.0_152</strong></h3> </td> 
   <td style="width:135px;"> <h3><strong>2.11.8</strong></h3> </td> 
   <td style="width:108px;"> <h3><strong>2.3.1</strong></h3> </td> 
   <td style="width:142px;"> <h3><strong>2.7.6(可自行更改)</strong></h3> </td> 
  </tr> 
 </tbody> 
</table>

## 一、Scala 的安装： ##

1.下载地址：[http://www.scala-lang.org/download/all.html][http_www.scala-lang.org_download_all.html]

我的scala版本是: 2.11.8，下载的scala直接安装就好，它会自动帮你将路径加上Path，直接在cmd上打：scala -version

![20181203203750954.PNG][]

如果没有报错，则说明安装成功了

2. Scala的IDE ：使用Elipse下载插件

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQwNTg3NTc1_size_16_color_FFFFFF_t_70][]

最好在输入一下 scala 命令符，确定是否有报错

2.Spark下载：[http://spark.apache.org/downloads.html][http_spark.apache.org_downloads.html]

我选择的版本是：2.3.1

选择好后，点击 第 3 项，下载。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQwNTg3NTc1_size_16_color_FFFFFF_t_70 1][]

然后使用清华的镜像进行下载：

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQwNTg3NTc1_size_16_color_FFFFFF_t_70 2][]

当我们下载好之后，Spark是不需要进行安装的，直接解压到Spark目录，然后配置一下Path环境变量就可以了

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQwNTg3NTc1_size_16_color_FFFFFF_t_70 3][]

cmd打开终端：输入 spark-shell， -中间没有空格

由于没有装hadodop，会报错，但是可以打开

3.hadoop下载：[https://archive.apache.org/dist/hadoop/common/][https_archive.apache.org_dist_hadoop_common]

[http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/][http_mirrors.tuna.tsinghua.edu.cn_apache_hadoop_common] 还是使用镜像比较快（推荐下载，但版本没那么多）

我们可以在上面下载spark时，看到需要hadoop2.7及以上的版本，我这里选择2.7.6

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQwNTg3NTc1_size_16_color_FFFFFF_t_70 4][]

和spark一样，配置环境变量：

> 配置Path： D:\\hadoop-2.7.6\\bin

winutils下载：[https://github.com/steveloughran/winutils][https_github.com_steveloughran_winutils]

![70][]

我看到其他博主是使用2.8.3 的，是可以运行的。因为他的winutils 直接可以在github中下载，而2.7.6 需要自行百度寻找。

4.输入 spark-shell

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQwNTg3NTc1_size_16_color_FFFFFF_t_70 5][]

5。输入网址：[http://127.0.0.1:4040/jobs/][http_127.0.0.1_4040_jobs]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQwNTg3NTc1_size_16_color_FFFFFF_t_70 6][]

终于。。。。。。。。。。。。。。。

### 项目推荐： ###

**[2000多G的计算机各行业电子资源分享（持续更新）][2000_G]**

**[2020年微信小程序全栈项目之喵喵交友【附课件和源码】][2020]**

**[Spring Boot开发小而美的个人博客【附课件和源码】][Spring Boot]**

**[Java微服务实战296集大型视频-谷粒商城【附代码和课件】][Java_296_-]**

**[Java开发微服务畅购商城实战【全357集大项目】-附代码和课件][Java_357_-]**

**[最全最详细数据结构与算法视频-【附课件和源码】][-]**

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQwNTg3NTc1_size_16_color_FFFFFF_t_70_pic_center]

[http_www.scala-lang.org_download_all.html]: http://www.scala-lang.org/download/all.html
[20181203203750954.PNG]: /images/20220412/4ad1bc518cd74a4d860727160b6e15f6.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQwNTg3NTc1_size_16_color_FFFFFF_t_70]: /images/20220412/076b9c78cfe340098b77983534fe8460.png
[http_spark.apache.org_downloads.html]: http://spark.apache.org/downloads.html
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQwNTg3NTc1_size_16_color_FFFFFF_t_70 1]: /images/20220412/4a2f5d6067054879bd7a2427ebaed672.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQwNTg3NTc1_size_16_color_FFFFFF_t_70 2]: /images/20220412/a8c7a968a8d944ca804cdd2dc0c8897a.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQwNTg3NTc1_size_16_color_FFFFFF_t_70 3]: /images/20220412/88b0c777d0684349a9ecfc302b505358.png
[https_archive.apache.org_dist_hadoop_common]: https://archive.apache.org/dist/hadoop/common/
[http_mirrors.tuna.tsinghua.edu.cn_apache_hadoop_common]: http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQwNTg3NTc1_size_16_color_FFFFFF_t_70 4]: /images/20220412/41836157dbb447d8b4f0f19d36671091.png
[https_github.com_steveloughran_winutils]: https://github.com/steveloughran/winutils
[70]: /images/20220412/e2e28a0f2bfe4da2ae6ec5d288d3e9a8.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQwNTg3NTc1_size_16_color_FFFFFF_t_70 5]: /images/20220412/4c967b5b7a60445aaf1cbbf9c8d208de.png
[http_127.0.0.1_4040_jobs]: http://127.0.0.1:4040/jobs/
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQwNTg3NTc1_size_16_color_FFFFFF_t_70 6]: /images/20220412/c9114e5fc010413b9ed4ff37101193a7.png
[2000_G]: https://mp.weixin.qq.com/s/sP4JgGWkCzpgwKr9sAV2_Q
[2020]: https://mp.weixin.qq.com/s?__biz=MzIyNTI3NDQ4NQ==&mid=2247487704&idx=1&sn=5f4b2127c4d49fd07ae072a0721424a2&chksm=e8036fc2df74e6d489c4aa9b06f917ef7cee6027f13e150fca53cf79d5d188d4ccc1af49e098&scene=21#wechat_redirect
[Spring Boot]: https://mp.weixin.qq.com/s?__biz=MzIyNTI3NDQ4NQ==&mid=2247487798&idx=2&sn=ac0293b996521b872a9dba5fbb3e65e6&chksm=e8036e2cdf74e73aba104a9a994a5b2e31483e8dcbe0f1d9936f6d5173b887e1560f59d2819c&scene=21#wechat_redirect
[Java_296_-]: https://mp.weixin.qq.com/s?__biz=MzIyNTI3NDQ4NQ==&mid=2247487674&idx=1&sn=7aff0bdf2bb727303f3d3618995aef21&chksm=e8036fa0df74e6b6d872c7e6ece179c524ed463a4a6b74c96875475c9a3d5ddb903427dd993b&scene=21#wechat_redirect
[Java_357_-]: https://mp.weixin.qq.com/s?__biz=MzIyNTI3NDQ4NQ==&mid=2247486376&idx=1&sn=d1fef270c463ea8ac663f6fbfedd70a0&chksm=e80374b2df74fda4d3bafba878a106a19e18c5fcda266008f4f37975847a21bc612ffcd5ff39&scene=21#wechat_redirect
[-]: https://mp.weixin.qq.com/s?__biz=MzIyNTI3NDQ4NQ==&mid=2247487750&idx=1&sn=747bccbb5f5ea6b58915198de40da777&chksm=e8036e1cdf74e70ae97a5e8e265b49d7236d904d291203309159d07ba1724033062c0e370843&scene=21#wechat_redirect
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQwNTg3NTc1_size_16_color_FFFFFF_t_70_pic_center]: /images/20220412/b70fd5d2a2ba4d21979cb1b5d36fb23b.png