大三上寒假15天--第1天

学习于林子雨《林子雨编著《大数据技术原理与应用》教材配套大数据软件安装和编程实践指南

一. 安装spark

第一步，spark下载（http://spark.apache.org/downloads.html）

 第二步，spark压缩包解压

        sudo tar -zxf ~/下载/spark-1.6.2-bin-without-hadoop.tgz -C /usr/local/

第三步，解压后文件夹改名为spark

1. cd /usr/local
2. sudo mv ./spark-1.6.2-bin-without-hadoop/ ./spark

第四步，赋予权限

        sudo chown -R hadoop:hadoop ./spark

第五步，安装后，还需要修改Spark的配置文件spark-env.sh

1. cd /usr/local/spark
2. cp ./conf/spark-env.sh.template ./conf/spark-env.sh
3. vim ./conf/spark-env.sh
4. 按i进入编辑模式，第一行插入export SPARK_DIST_CLASSPATH=$(/usr/local/hadoop/bin/hadoop classpath)，如图：

第六步，测试

1. cd /usr/local/spark
2. bin/run-example SparkPi
3. 结果应为，如图：，还有很多信息，这里只截了这么多。

到此安装就算完成了。

大三上寒假15天--第1天

原文：https://www.cnblogs.com/my---world/p/12250521.html