文章 2024-08-19 来自:开发者社区

实时计算 Flink版产品使用问题之如何实现血缘查询功能

问题一:使用flink cdc on yarn运行,先全量后增量的方式,这种情况咱们有什么好的建议吗? 使用flink cdc on yarn运行,先全量后增量的方式,采集数据到starrocks,碰到数据量太大的情况,比如5000万以上,就可能会遇到采集超时任务失败的情况,数据一致性得不到保障,这种情况咱们有什么好的建议吗? 参考答案: 使用spar...

实时计算 Flink版产品使用问题之如何实现血缘查询功能
文章 2024-07-16 来自:开发者社区

实时计算 Flink版产品使用问题之在从SQLServer捕获数据变更(CDC)时,开启CDC功能后对应的表中没有记录变化数据,是什么原因

问题一:Flink CDC里flink-sql 中json_array 类型 怎么转成 array类型? Flink CDC里flink-sql 中 json_array 类型 怎么转成 array 类型? 参考答案: 自定义udf函数。 关于本问题的更多回答可点击进行查看: https://developer.al...

实时计算 Flink版产品使用问题之在从SQLServer捕获数据变更(CDC)时,开启CDC功能后对应的表中没有记录变化数据,是什么原因
问答 2024-07-11 来自:开发者社区

Flink的产品,有校验和订正的功能么?

Flink的产品,有校验和订正的功能么?

阿里云文档 2024-06-04

Flink产品公告(2022年及之前)

本文为您介绍实时计算Flink版2022年及之前产品公告,包括平台升级、API版本升级等。

文章 2024-05-23 来自:开发者社区

实时计算 Flink版产品使用合集之如何从某一时刻开始CDC的功能

问题一:Flink CDC 在mysqlcdc同步到doris的时候,怎么进行设置? Flink CDC 在mysqlcdc同步到doris的时候,怎么进行设置,可以在全量同步完之后,把任务停了。然后后续每天定时启动后还可以接着同步前一天的增量数据? 参考答案: 都CDC了那就是实时监控用流进行数据传输,如果是批的话应该数据查询同步完就结束了,save...

文章 2024-05-23 来自:开发者社区

实时计算 Flink版产品使用合集之哪个版本支持使用不锁表功能

问题一:请问对于pg cdc2.4版本,如果使用不锁表功能的话,需要用Flink CDC哪个版本啊? 请问对于pg cdc2.4版本,如果使用不锁表功能的话,需要用Flink CDC哪个版本啊? 参考答案: 官网有版本,基本绝大多数版本都行 关于本问题的更多回答可点击进行查看: https://developer....

实时计算 Flink版产品使用合集之哪个版本支持使用不锁表功能
文章 2024-05-23 来自:开发者社区

实时计算 Flink版产品使用合集之采集选择增量(latest)读取模式,是否可以使用动态加载表功能

问题一:Flink CDC的同步,如果有数据同步缺失,flink有啥方法跟机制吗? Flink CDC的同步,如果有数据同步缺失,flink有啥方法跟机制吗? 参考回答: Flink CDC 提供了一些机制来处理数据同步缺失的情况,以确保数据的完整性。以下是一些常见的方法和机制: 并行度调整: 增加 F...

文章 2024-05-23 来自:开发者社区

实时计算 Flink版产品使用合集之如何使用任务调度的功能

问题一:在Flink为什么我的控制台打开是这样的呀? 在Flink为什么我的控制台打开是这样的呀? 参考回答: 权限问题。 https://help.aliyun.com/zh/flink/user...

实时计算 Flink版产品使用合集之如何使用任务调度的功能
文章 2024-05-17 来自:开发者社区

实时计算 Flink版产品使用合集之MongoDB CDC connector的全量快照功能可以并发读取吗

问题一:Flink CDC 测试发现update 拿到的数据很多字段是null ,实际是有值,这个有解吗? Flink CDC oracle cdc2.4.1 oracle 12c 测试发现update 拿到的数据很多字段是null ,实际是有值,这个有解吗? ...

实时计算 Flink版产品使用合集之MongoDB CDC connector的全量快照功能可以并发读取吗
文章 2024-05-16 来自:开发者社区

实时计算 Flink版产品使用合集之FlinkSQL和PyFlink是否支持整库同步功能

问题一:Flink topic分配是怎么实现的 没有自定义的吗? Flink topic分配是怎么实现的 没有自定义的吗? 参考回答: 使用flink自带的,改了下源码那里面的分配算法,但是不理想 关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/573368 问题...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等

登录插画

登录以查看您的控制台资源

管理云资源
状态一览
快捷访问