IMF SPARK 源代码发行定制班 预习课程 IDEA Spark应用程序的调试 (1)从SparkSubmit入口进行调试

 IDEA Spark应用程序的调试 从SparkSubmit入口进行调试




1.下载spark-1.6.1
登录官网http://spark.apache.org/


2. 安装IntelliJ IDEA。进入下载页面：http://www.jetbrains.com/idea/download/，选择对应版本，下载并安装到集群中某个节


点上192.168.189.2 （作为后续调试时的IDE）。 


3.将IDEA、IDE 安装到 worker2上192.168.189.2 。安装的winscp文件上传目录 IMFIdeaIDE


root@worker1:/usr/local/IMFIdeaIDE# ls
ideaIC-2016.1.1.tar.gz  spark-1.6.1-bin-hadoop2.6.tgz  spark-1.6.1.tgz
root@worker1:/usr/local/IMFIdeaIDE# 


4. securt 远程 在 ubuntu linux 下安装 idea报错，没有图形化页面


root@worker1:/usr/local/idea-IC-145.597.3/bin# idea.sh
OpenJDK 64-Bit Server VM warning: ignoring option MaxPermSize=350m; support was removed in 8.0


Startup Error: Unable to detect graphics environment


root@worker1:/usr/local