spark 预编译安装

1.下载地址:

  http://mirrors.tuna.tsinghua.edu.cn/apache/spark/spark-3.0.0-preview/spark-3.0.0-preview-bin-hadoop2.7.tgz

上传虚拟机或服务器

2. 解压文件

  tar -xzvf spark-3.0.0-preview-bin-hadoop2.7.tgz

3.配置环境变量

  vi /etc/profile 

  

  source /etc/profile

4. 启动spark 

spark-shell local[4]

local[n] n就是线程数 可加 可不加看场景

sprk RDD操作

 

 

 

猜你喜欢

转载自www.cnblogs.com/YuanWeiBlogger/p/11923558.html