文章 2023-06-27 来自:开发者社区

Flink CDC 2.4 正式发布,新增 Vitess 数据源,PostgreSQL 和 SQL Server CDC 连接器支持增量快照,升级 Debezium 版本

一、Flink CDC 简介Flink CDC[1] 是基于数据库的日志 CDC 技术,实现了全增量一体化读取的数据集成框架。配合 Flink 优秀的管道能力和丰富的上下游生态,Flink CDC 可以高效实现海量数据的实时集成。作为新一代的实时数据集成框架,Flink CDC 具有全增量一体化、无锁读取、并行读取、表结构变更自动同步、分布式架构等技术优势,同时社区提供了完善的中英文文档支持[2....

Flink CDC 2.4 正式发布,新增 Vitess 数据源,PostgreSQL 和 SQL Server CDC 连接器支持增量快照,升级 Debezium 版本
问答 2023-04-26 来自:开发者社区

如果flink-mysql-cdc的DateStream的table设置为t1,t2,server-

如果flink-mysql-cdc的DateStream的table设置为t1,t2,server-id设置为5401和5402,并发度设置为2,那么会开两个binlog,每个binlog监听一张表吗?

问答 2023-04-05 来自:开发者社区

请问一下,我已经使用Flink的SQL Client通过JDBC连接模式将数据从SQL Server

请问一下,我已经使用Flink的SQL Client通过JDBC连接模式将数据从SQL Server导入到Hudi表中 然后将数据从hudi导入到SQL Server另一个表中 报错 Loading class com.mysql.jdbc.Driver'. This is deprecated. The new driver class iscom.mysql.cj.jdbc.Driver'.....

问答 2023-03-29 来自:开发者社区

请问,Flink SQL Connector JDBC有没有SQL Server 2012数据库的

请问,Flink SQL Connector JDBC除了有mysql-connector-java-5.1.37-bin.jar 驱动,有没有SQL Server 2012数据库的JDBC驱动?

问答 2023-03-21 来自:开发者社区

请问,Flink CDC将SQL Server 2012数据库一亿数据写入Hudi,要多少配置?

之前我花了不少时间配置好环境顺利插入百万条数据,然后尝试上亿条数据的操作,一直不成功。请问一下,Flink CDC将SQL Server 2012数据库的一亿条数据表写入Hudi表,需要服务器什么物理配置,这是我现在的内存等配置

问答 2023-03-21 来自:开发者社区

请问一个flink sql的job里多条select sql,可以共享相同的server id吗?

请教一下,一个flink sql的job里面多条select sql,可以共享相同的server id吗?

问答 2023-03-15 来自:开发者社区

flink on yarn的部署模式可以配置和开启flink自己的history server吗?

flink on yarn的部署模式可以配置和开启flink自己的history server吗?

问答 2023-01-15 来自:开发者社区

对于Flink CDC,SQL Server这个问题找到原因了没?

对于Flink CDC,SQL Server "为过程或函数 cdc.fn_cdc_get_all_changes_ ... 提供的参数数目不足" 这个问题找到原因了没,这个问题目前导致生产任务隔三差五的挂。有什么应对方法吗?谢谢!

问答 2023-01-09 来自:开发者社区

flink2.0并发读取数据是设置server id吗,为啥我设置多个没有用?

flink2.0并发读取数据是设置server id吗,为啥我设置多个没有用?

问答 2023-01-09 来自:开发者社区

实时计算Flink如何指定MySQL CDC的server id

实时计算Flink如何指定MySQL CDC的server id

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等

登录插画

登录以查看您的控制台资源

管理云资源
状态一览
快捷访问