文章 2017-11-15 来自:开发者社区

spark 集群简单配置

一、配置环境变量: export SPARK_HOME=/usr/hdp/2.2.8.0-3150/spark-1.6.1-bin-hadoop2.6 PATH=$PATH:${SPARK_HOME}/bin export PATH 二、配置环境: vi ./conf/spark-env.sh export JAVA_HOME=/usr/java/jdk1.8.0_73 export SPAR.....

问答 2016-07-21 来自:开发者社区

Spark集群配置slaves为外网IP,但是在网页中查看时还是内网IP,无法通过外网直接访问?

1).在阿里云服务器集群上构建了 spark集群环境2).master 和 slaves都配的是外网ip3).启动页面后,在网页上查看各节点计算信息时,链接的都是内网IP4).需求是想通过外网直接访问各节点的页面信息

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等