2.安装Spark与Python练习

一、安装Spark

1. 检查基础环境hadoop,jdk

            

 

　　2.下载spark

　　     

 

　　3.配置文件

　　配置环境
　　vim /usr/local/spark/conf/spark-env.sh

           

 

  修改环境变量 vim ~/.bashrc 
  生效 source ~/.bashrc

         

 

　　4.试运行Python代码

          

 

二、Python编程练习：英文文本的词频统计

　　1.准备文本文件

          

                 

          

　　2.统计每个单词出现的次数

　　3.结果写文件