阿里云文档 2024-11-28

如何在Dataphin自定义Ververica Flink实时任务的资源

Ververica Flink实时任务资源自定义,即指实时计算Flink配置细粒度资源的专家模式 (BETA),Flink全托管引入的全新的资源配置模式,支持对作业所使用的资源进行细粒度的资源控制,以满足作业吞吐的要求。系统会自动根据您配置的资源需求,以Native K8s的模式运行作业,TM的规格和个数将会根据Slot的规格和作业并发度,由系统自动决定。本文将介绍如何在Dataphin自定义Ve...

问答 2024-08-06 来自:开发者社区

请问各位,怎么可以实现flink重启后自动恢复正在运行的job任务?

请问各位大佬,flink重启后,正在运行的job和历史job记录都没有了,怎么可以实现flink重启后自动恢复正在运行的job任务?

文章 2024-07-16 来自:开发者社区

实时计算 Flink版产品使用问题之直接killyarn-session集群导致正在运行的任务失败,该如何恢复

问题一:请问一下Flink mysqlcdc获取到数据之后 关联结果不更新 这个怎么办? 请问一下Flink 一个kafka流跟mysql cdc流关联 kafka流直接获取到数据执行sql mysqlcdc获取到数据之后 关联结果不更新 这个怎么办? 参考答案: 您好,您的问题可能与Flink的CDC(Change Data Capture)有关。在...

实时计算 Flink版产品使用问题之直接killyarn-session集群导致正在运行的任务失败,该如何恢复
文章 2024-06-17 来自:开发者社区

实时计算 Flink版操作报错合集之同步MySQL数据到另一个MySQL数据库,第一次同步后源表数据发生变化时目标表没有相应更新,且Web UI中看不到运行的任务,该怎么解决

问题一:Flink cdc3.0.1,oracle11,在源库首次插入数据的时候报错怎么办? Flink cdc3.0.1,oracle11,在源库首次插入数据的时候报错怎么办? 参考回答: debug看源码,改源码编译最好。 关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/609838 ...

文章 2024-06-15 来自:开发者社区

实时计算 Flink版产品使用问题之运行run-application --target kubernetes-application执行,通过进程的返回码来决定作业是否成功,任务返回码都是0,该怎么办

问题一:有个Flink问题咨询下,application模式需要怎么配置呢? 有个Flink问题咨询下,运行run-application --target kubernetes-application执行,想通过进程的返回码来决定作业是否成功,但是任务不论成功还是失败返回码都是0,session模式成功是0,失败是其他的,application模式需要怎么配置呢? ...

实时计算 Flink版产品使用问题之运行run-application --target kubernetes-application执行,通过进程的返回码来决定作业是否成功,任务返回码都是0,该怎么办
问答 2024-06-05 来自:开发者社区

在Flink CDC中升级到Flink 1.18.1 + CDC 3.1.0后运行任务报错如何解决?

在Flink CDC中升级到Flink 1.18.1 + CDC 3.1.0后运行任务报jar包错误,这是什么情况呢?请参考图片:

问答 2024-06-05 来自:开发者社区

在Flink CDC中运行一个任务20分钟了,状态还是 loading...如何排查解决呢?

在Flink CDC中运行一个任务20分钟了,状态还是 loading...如何排查解决呢?请参考图片:

文章 2024-03-14 来自:开发者社区

Flink CDC产品常见问题之sql运行中查看日志任务失败如何解决

问题一:Flink CDC里mysql-cdc同步到kafka中,对同一条数据多次操作,怎么区分先后? Flink CDC里mysql-cdc同步到kafka中,对同一条数据多次操作,op_ts字段可能会一样,如何区分先后顺序呢?同一条数据在短时间内有i、d、u操作,操作时间读取过来也是同一个,这咋区分哪个前哪个后呢? 参考答案: 我是自己解析之后按照...

问答 2023-12-10 来自:开发者社区

Flink CDC调整了binlog保存时间后运行任务。又出现了报错。如下图。能否帮忙看一下呀?

Flink CDC调整了binlog保存时间后运行任务。又出现了报错。如下图。查看日志似乎是找不到checkpoint了。能否帮忙看一下呀?。下面是提交的运行语句,报错图和日志:./bin/flink run-application --target kubernetes-application -Dkubernetes.cluster-id=cluster231205aa -Dkubernet....

问答 2023-12-04 来自:开发者社区

Flink CDC如何评估运行任务与资源需求的关系呀?

Flink CDC如何评估运行任务与资源需求的关系呀?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等