1.jdk的安装;(java1.8)
2.hadoop安装;(hadoop2.7.2)
3.scala安装;(scala2.11.8)
4.spark安装。(spark2.2.0)
0.环境:mac OS X 10.12
1.jdk的安装:安装java JDK1.7及以上的版本,配置好环境变量。
查看是否安装成功命令:
$: java -version
2.hadoop安装:
$: brew install hadoop
默认安装到 /usr/local/Cellar/hadoop下。 说明homebrew是mac OS 上的包管理软件。安装hadoop还需要配置ssh等,这里不重复了。
3.scala安装:安装scala 2.9.3以上版本。
(1)下载安装:
$:brew install scala
默认安装到 /usr/local/Cellar/
安装成功提示:
To use with IntelliJ, set the Scala home to:
/usr/local/opt/scala/ideaBash completion has been installed to:
/usr/local/etc/bash_completion.d ==> Summary
/usr/local/Cellar/scala/2.11.8: 51 files, 30.9M, built in 1 minute 18 seconds
(2)配置HOME:
$:sudo</

本文提供了在Mac OS X 10.12上安装Spark 2.2.0的详细步骤,包括先决条件:安装jdk1.8、hadoop2.7.2和scala2.11.8。安装过程中强调了配置环境变量的重要性,以及避免常见错误的提示,如正确指定scala版本和理解环境变量的区别。
3万+

被折叠的 条评论
为什么被折叠?



