spark安装教程

发表于 | 分类于

在Windows下安装spark

  1. 下载相应版本的 python( 2.7+/3.4+)、java、spark 和 hadoop ，安装 python 和 java
  2. 把 %JAVA_HOME%\bin、%HADOOP_HOME%\bin 和 %SPARK_HOME%\bin 添加到环境变量path中
  3. 下载 winutils.exe 放到 %HADOOP_HOME%\bin 中
  4. 安装 pycharm，在 Edit Configurations->Environment variables 里添加 %SPARK_HOME%\bin 和 %SPARK_HOME%\python

注1：%JAVA_HOME% 指 java的安装位置，%HADOOP_HOME% 和 %SPARK_HOME% 分别指 hadoop 和 spark 的解压位置。
注2：路径不要出现空格！路径不要出现空格！路径不要出现空格！