问答 2024-02-06 来自:开发者社区

flink cdc pipeline配置文件那种sink支持MySQL吗?

flink cdc pipeline配置文件那种sink支持MySQL吗?就是想从一个mysql 同步到另一个mysql 。一直报这个错怎么解决?

问答 2024-02-06 来自:开发者社区

flink cdc 2.4.2版本,去读分布式mysql的会报连接超时的问题怎么解决?

flink cdc 2.4.2版本,去读分布式mysql的会报连接超时的问题怎么解决?The last packet sent successfully to the server was 0 milliseconds ago. The driver has not received any packets from the server.从2.4.0升级到2.4.2后报的。

高性能

基于 Flink CDC 打造企业级实时数据同步方案

传统的数据集成通常由全量和增量同步两套系统构成,在全量同步完成后,还需要进一步将增量表和全量表进行合并操作,这种架构的组件构成较为复杂,系统维护困难。本方案提供 Flink CDC 技术实现了统一的增量和全量数据的实时集成。
技术解决方案背景图
问答 2024-02-06 来自:开发者社区

Flink CDC里mysql单条更新,消费有时候延迟几十分钟,这种情况怎么解决?

Flink CDC里mysql单条更新,一次更新8000条,到kafka相当于16000条记录,持续更新4分钟,kafka15个分区,flink4个并行度消费,直接入库,没算子,消费有时候延迟几十分钟,这种情况怎么解决?

问答 2024-02-06 来自:开发者社区

Flink CDC里MySQL CDC Pipeline 整库同步时 从指定的时间戳开始读取 吗?

Flink CDC里MySQL CDC Pipeline 整库同步时 从指定的时间戳开始读取 binlog 事件,然后 在指定的时间戳 结束任务 吗?目前看文档只能配置开始吗?能否指定结束时间呢 或者有其他方式实现么?

问答 2024-02-06 来自:开发者社区

Flink CDC里在生产跑 MySQL 向 Doris 同步数据,可以直接用 这个吗?

Flink CDC里在生产跑 MySQL 向 Doris 同步数据,可以直接用 QuickStart 里介绍的一样,通过 yaml 来编写 task 配置信息,cdc 脚本启动 flink job 就可以了么,区别只是生产要一个稳定的 flink 集群? 因为我看 flink-cdc 的release 包里,其实就是依赖 cdc 的包和 pipline 的包,pipline 的话是对 conne....

问答 2024-02-06 来自:开发者社区

Flink CDC里使用3.0 测试mysql到starrocks启动报错怎么办?

Flink CDC里使用3.0 测试mysql到starrocks启动报错怎么办?Caused by: org.apache.flink.util.FlinkRuntimeException: com.ververica.cdc.connectors.shaded.com.zaxxer.hikari.pool.HikariPool$PoolInitializationException: Fai....

问答 2024-02-06 来自:开发者社区

现在flink cdc 支持从mysql 到oceanbase吗?

现在flink cdc 支持从mysql 到oceanbase吗?

问答 2024-02-06 来自:开发者社区

Flink CDC里我mysql 数据库有个表它的字段定义为date类型,数值变化什么原因?

Flink CDC里我mysql 数据库有个表它的字段定义为date类型,比如在数据库中存储的值为2024-02-01,用flink cdc读取binlog这个字段的值变成了数字19754,是什么原因,该怎么解决?

问答 2024-02-06 来自:开发者社区

flink cdc有没有个参数设置?我能让MySQL的update的数据插入到doris而非更改呀?

是否存在Flink CDC的参数设置,允许将MySQL的update的数据插入到doris而非更改,以便于记录历史数据变更?

问答 2024-02-06 来自:开发者社区

flink cdc抽取mysql的utf8mb4编码的表到Doris里,怎么编码呢?

flink cdc抽取mysql的utf8mb4编码的表到Doris里,Doris只支持utf8,这个怎么去解决编码的问题呢?中文全是乱码,flink1.18.1。

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

+关注