IDEA Spark应用程序的调试 从SparkSubmit入口进行调试
1.下载spark-1.6.1
登录官网http://spark.apache.org/
2. 安装IntelliJ IDEA。进入下载页面:http://www.jetbrains.com/idea/download/,选择对应版本,下载并安装到集群中某个节
点上192.168.189.2 (作为后续调试时的IDE)。
3.将IDEA、IDE 安装到 worker2上192.168.189.2 。安装的winscp文件上传目录 IMFIdeaIDE
root@worker1:/usr/local/IMFIdeaIDE# ls
ideaIC-2016.1.1.tar.gz spark-1.6.1-bin-hadoop2.6.tgz spark-1.6.1.tgz
root@worker1:/usr/local/IMFIdeaIDE#
4. securt 远程 在 ubuntu linux 下安装 idea报错,没有图形化页面
root@worker1:/usr/local/idea-IC-145.597.3/bin# idea.sh
OpenJDK 64-Bit Server VM warning: ignoring option MaxPermSize=350m; support was removed in 8.0
Startup Error: Unable to detect graphics environment
root@worker1:/usr/local
IMF SPARK 源代码发行定制班 预习课程 IDEA Spark应用程序的调试 (1)从SparkSubmit入口进行调试
关注
打赏