0x01 环境说明
1.1 本地
OS: windows 10
JDK: jdk1.8.0_121
Scala: scala-2.11.11
IDE: IntelliJ IDEA ULTIMATE 2017.2.1
1.2 服务器
OS: CentOS_6.5_x64
JDK: jdk1.8.111
Hadoop: hadoop-2.6.5
Spark: spark-1.6.3-bin-hadoop2.6
Scala: scala-2.11.11
0x02 windows端配置
2.1 安装JDK
配置环境变量
JAVA_HOME
CLASSPATH
Path
2.2 配置hosts
文件位置
C:\Windows\System32\drivers\etc
新增如下内容(和集群的hosts文件内容一样,根据自己集群的实际情况修改)
192.168.1.10 master
192.168.1.11 slave1
192.168.1.12 slave2
2.3 安装IntelliJ IDEA
- 注意插件安装
Maven