问答 2021-12-07 来自:开发者社区

Spark任务提交yarn模式yarn-cluster的过程是什么?

Spark任务提交yarn模式yarn-cluster的过程是什么?

问答 2021-12-07 来自:开发者社区

Spark任务提交yarn模式yarn-cilent的过程是什么?

Spark任务提交yarn模式yarn-cilent的过程是什么?

问答 2021-12-07 来自:开发者社区

Spark任务提交yarn的两种模式yarn-cilent与yarn-cluster主要有什么区别?

Spark任务提交yarn的两种模式yarn-cilent与yarn-cluster主要有什么区别?

问答 2021-12-07 来自:开发者社区

flink 1.11 发布sql任务到yarn session报错

本人试图将flink-sql-gateway(https://github.com/ververica/flink-sql-gateway)升级到1.11支持版本,将flink sql(用到hbase connector)提交到yarn session后运行时报: org.apache.hadoop.hbase.DoNotRetryIOException: java.lang.NoClassDe....

问答 2021-12-07 来自:开发者社区

我有一个接kafka 写入tidb的任务 为什么会启动2个yarn任务去运行呢?

你好。我有一个接kafka 写入tidb的任务 为什么会启动2个yarn任务去运行呢? 我是先用datastream 接入kafka。然后转成table sql写入到tidb 2个job name 一个叫Env.execute配置的名字 一个是叫insert 写入tidb的sql语句名字 *来自志愿者整理的flink邮件归档

问答 2021-12-02 来自:开发者社区

flink run -d -m yarn-cluster 提交任务到yarn集群不成功怎么办

不太明白“配置到哪一级”是什么含义。export 命令是将变量导出到目前的 shell session,在从 shell logout 之前都有效。如果运行了 export 命令之后再运行 flink run 应该就可行了。*来自志愿者整理的flink邮件归档

问答 2021-01-05 来自:开发者社区

Flink on K8s 在任务启动时需要指定 TaskManager 的个数,有和 Yarn 一样

Flink on K8s 在任务启动时需要指定 TaskManager 的个数,有和 Yarn 一样的动态资源申请方式吗?

问答 2020-06-05 来自:开发者社区

spark任务在yarn上 ,报错了?报错

Caused by: java.io.FileNotFoundException: /etc/cloudera-scm-server/db.properties (Permission denied)     at java.io.FileInputStream.open0(Native Method)     at java.io.Fi...

问答 2019-08-14 来自:开发者社区

spark任务提交到yarn上运行的,但是总在一个节点上多个executer运行,请问有什么思路吗?

spark任务提交到yarn上运行的,但是总在一个节点上多个executer运行,请问有什么思路吗? 本问题来自阿里云开发者社区的【11大垂直技术领域开发者社群】。https://developer.aliyun.com/article/706511 点击链接欢迎加入感兴趣的技术领域群。

问答 2019-02-14 来自:开发者社区

大家提交flink任务到yarn的时候 是在哪个节点提交的? namenode还是 datanode?

转自钉钉群21789141:大家提交flink任务到yarn的时候 是在哪个节点提交的? namenode还是 datanode?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

阿里巴巴终端技术

阿里巴巴终端技术最新内容汇聚在此,由阿里巴巴终端委员会官方运营。阿里巴巴终端委员会是阿里集团面向前端、客户端的虚拟技术组织。我们的愿景是着眼用户体验前沿、技术创新引领业界,将面向未来,制定技术策略和目标并落地执行,推动终端技术发展,帮助工程师成长,打造顶级的终端体验。同时我们运营着阿里巴巴终端域的官方公众号:阿里巴巴终端技术,欢迎关注。

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等

登录插画

登录以查看您的控制台资源

管理云资源
状态一览
快捷访问