Windows系统pyspark

2021/7/20 7:06:14

本文主要是介绍Windows系统pyspark,对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!

1、JDK(本文中使用JDK8)

下载:oracle官网https://www.oracle.com/cn/java/technologies/javase/javase-jdk8-downloads.html

注意:需要有账号才能下载,注册很麻烦,有如下网站可以在里面下载也可以使用里面的共享账号

http://www.codebaoku.com/jdk/jdk-oracle-account.html

在这里插入图片描述
下载完成后,进行安装:
在这里插入图片描述
安装完成后,配置Java的三个系统环境变量:

JAVA_HOME: C:\Program Files\Java\jdk1.8.0_291

CLASS_PATH: C:\Program Files\Java\jdk1.8.0_291\lib

Path中增加: C:\Program Files\Java\jdk1.8.0_291\bin

在这里插入图片描述
在命令行窗口输入两个命令:java和javac,如果出现如下信息,则安装成功:
在这里插入图片描述
在这里插入图片描述

2、安装Scala(Scala-2.12.14)

查一下spark安装对应的scala版本
在这里插入图片描述
如上图所示,当前罪行的spark3.0+对应的是Scala2.12版本,所以我们下载2.12的版本,Scala官网:https://www.scala-lang.org/download/all.html
在这里插入图片描述
随意找一个2.12版本下载,我下载的是2.12.14
在这里插入图片描述
自行选择哪种版本,这里我选择命令行版本下载

下载完成后安装,安装完成后添加环境变量



这篇关于Windows系统pyspark的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!


扫一扫关注最新编程教程