问答
2019-05-16
来自：开发者社区
请教大家一个问题： spark on yarn 内存溢出 除了增加driver内存以外还有什么好的解决方案吗？
我现在一个清洗程序 从kafka读取消息 然后处理 然后写入kafka sink。 driver 给了它4G 还报内存溢出，我查了下内存溢出那时段的数据是比较少的。 一分钟最多100条。
本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。
apache sparkyarn相关内容
- apache spark yarn区别
- 环境apache spark yarn
- apache spark yarn报错
- 大数据apache spark yarn
- apache spark Yarn模式
- apache spark yarn集群运行
- apache spark master yarn
- apache spark yarn运行
- emr yarn apache spark
- yarn apache spark
- apache spark概述部署standalone yarn
- apache spark yarn部署
- apache spark yarn安装配置
- apache spark yarn简介
- yarn apache spark监控
- yarn apache spark报错
- apache spark yarn资源
- apache spark kafka yarn
- apache spark yarn缺点
- apache spark yarn yarn-cluster区别
- apache spark yarn参数
- apache spark yarn yarn-cluster
- apache spark任务提交yarn模式
- apache spark任务提交yarn模式yarn-cilent
- yarn hbase apache spark
apache spark您可能感兴趣
- apache spark技术
- apache spark大数据
- apache spark优先级
- apache spark batch
- apache spark客户端
- apache spark任务
- apache spark调度
- apache spark作业
- apache spark Hive
- apache spark安装
- apache spark SQL
- apache spark streaming
- apache spark数据
- apache spark Apache
- apache spark Hadoop
- apache spark rdd
- apache spark MaxCompute
- apache spark集群
- apache spark运行
- apache spark summit
- apache spark模式
- apache spark分析
- apache spark flink
- apache spark学习
- apache spark Scala
- apache spark机器学习
- apache spark应用
- apache spark实战
- apache spark操作
- apache spark程序
Apache Spark 中国技术社区
阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区，定期推送精彩案例，问答区数个 Spark 技术同学每日在线答疑，只为营造 Spark 技术交流氛围，欢迎加入！
+关注