最新版spark-2.2.0安装教程

本文提供了在Mac OS X 10.12上安装Spark 2.2.0的详细步骤,包括先决条件:安装jdk1.8、hadoop2.7.2和scala2.11.8。安装过程中强调了配置环境变量的重要性,以及避免常见错误的提示,如正确指定scala版本和理解环境变量的区别。

1.jdk的安装;(java1.8)
2.hadoop安装;(hadoop2.7.2)
3.scala安装;(scala2.11.8)
4.spark安装。(spark2.2.0)

0.环境:mac OS X 10.12
1.jdk的安装:安装java JDK1.7及以上的版本,配置好环境变量。
查看是否安装成功命令:
$: java -version

2.hadoop安装:
$: brew install hadoop
默认安装到 /usr/local/Cellar/hadoop下。 说明homebrew是mac OS 上的包管理软件。安装hadoop还需要配置ssh等,这里不重复了。

3.scala安装:安装scala 2.9.3以上版本。
(1)下载安装:

$:brew install scala

默认安装到 /usr/local/Cellar/
安装成功提示:

To use with IntelliJ, set the Scala home to:
/usr/local/opt/scala/idea

Bash completion has been installed to:
/usr/local/etc/bash_completion.d ==> Summary
/usr/local/Cellar/scala/2.11.8: 51 files, 30.9M, built in 1 minute 18 seconds

(2)配置HOME:
$:sudo</
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值