Windows和PC机上搭建Spark+Python开发环境的详细步骤

来自CloudWiki
Cloud17讨论 | 贡献2021年5月4日 (二) 10:28的版本
(差异) ←上一版本 | 最后版本 (差异) | 下一版本→ (差异)
跳转至: 导航搜索

安装python

Python环境的安装

安装Java

安装并配置JDK

安装Spark

在https://archive.apache.org/dist/spark/spark-2.2.0/ 中下载 spark-2.2.0-bin-hadoop2.7.tgz

安装

只需解压程序包,并拷贝至存放路径,注意安装路径中的文件夹名称不要存在空格


配置环境变量

新建系统变量SPARK_HOME,值为Spark安装路径

配置系统变量PATH,添加%SPARK_HOME%\bin及%SPARK_HOME%\sbin


参考文档:https://mp.weixin.qq.com/s/mUUKO-oCsy_xxi7dQduhwg