问答 2023-07-03 来自:开发者社区

大神们,请教一个问题。我用flink1.16.1提交word count任务到yarn上,并行度是?

大神们,请教一个问题。我用flink1.16.1提交word count任务到yarn上,并行度是5。集群规模2.13T内存,255core(Hadoop3.3.0),只有一个默认队列,没有其他在跑的任务,后台也没其他耗资源的服务。第一个任务可以正常跑起来,第二个就一直created状态,日志一直打只能申请到3个cotainer?但是用Hadoop的example跑mr任务就能跑起来多个,感觉y....

问答 2023-03-07 来自:开发者社区

目前任务运行在yarn上,如果调整了flink的并行度,需要手动重启,有什么解决办法吗?

目前任务运行在yarn上,如果调整了flink的并行度,需要手动重启,有什么解决办法吗?

阿里云文档 2022-12-29

概述Dataphin中运维页面终止Spark SQL任务实例后,底层Yarn作业也会终止。详细信息Dataphin中运维页面终止Spark SQL任务实例后,底层Yarn作业任务也会终止或者关闭。适用于Dataphin公共云V3.5.6

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

阿里巴巴终端技术

阿里巴巴终端技术最新内容汇聚在此,由阿里巴巴终端委员会官方运营。阿里巴巴终端委员会是阿里集团面向前端、客户端的虚拟技术组织。我们的愿景是着眼用户体验前沿、技术创新引领业界,将面向未来,制定技术策略和目标并落地执行,推动终端技术发展,帮助工程师成长,打造顶级的终端体验。同时我们运营着阿里巴巴终端域的官方公众号:阿里巴巴终端技术,欢迎关注。

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等