PyCharm中配置PySpark环境的三种实现方法

PyCharm配置PySpark环境的三种方案

第一种配置方案如下：

依次点击 File --> Default Setting，在 Project Interpreter 列表中选择目标 Python 版本，点击右侧锯齿形图标（设置），选择 more，再选中刚才指定的 Python 版本，点击最下方的 Edit（即增加到该 Python 版本下），点击 ➕ 按钮，选中 Spark 安装目录下的 python 目录，最后一路点击 OK 完成设置。

随后在 Python 文件中编写如下代码进行测试：

from pyspark import SparkConf

方案二：使用PyCharm包管理器

若上述方法无效，可尝试以下替代方案。

使用 PySpark 包（适用于 Spark 2.2.0 及后续版本）

第二种操作方法：

1. 进入 File -> Settings -> Project Interpreter

2. 点击 install 按钮并搜索 PySpark

方案三：手动拷贝pyspark目录

第三种方法（需预先下载 Spark 安装包）：

下载 Spark 安装包，将 Spark 主目录中 python 目录下的 pyspark 目录拷贝至

/Library/Frameworks/Python.framework/Versions/3.5/lib/python3.5/site-packages

目录中，在 PyCharm 中

from pyspark import SparkContext

配置完成后即可成功使用 Python 编写 Spark 程序。