阿里云文档 2025-03-10

innodb_flush_log_at_trx_commit和sync_binlog参数作用是什么,如何修改

innodb_flush_log_at_trx_commit和sync_binlog参数分别控制了MySQL中Redo Log日志的记录方式和Binlog的更新策略。通过合理调整这两个参数,可以在数据库性能和数据安全性之间取得平衡。

问答 2023-06-29 来自:开发者社区

Flink CDC中mysql-cdc默认序列化反序列化binlog为debezium json吗?

Flink CDC中mysql-cdc默认序列化反序列化binlog为debezium json吗,可以支持canal json吗?暂时没有接paimon,我是需要从json中获取表的主键以便后续操作,canal json中有pkNames字段,debezuim json中我没发现代码主键的字段,不知道是没有还是我没找到

问答 2023-06-29 来自:开发者社区

mysql cdc 动态添加表的功能 我发现 我动态添加的表 怎么没有读取新增的binlog啊?

mysql cdc 动态添加表的功能 我发现 我动态添加的表 怎么没有读取新增的binlog啊?

问答 2023-06-29 来自:开发者社区

巨佬们,请教个问题: 我使用flinkCDC 采集MySQL数据,MySQL中的binlog清理策?

巨佬们,请教个问题: 我使用flinkCDC 采集MySQL数据,MySQL中的binlog清理策略是(1.占磁盘30%;2.binlog存储超过18个小时;3.binlog文件超过60个),这种策略导致采集任务经常性找不到binlog, 请问,在不动mysql端的情况下,flink端有什么参数可以解决这个问题的吗?

问答 2023-06-28 来自:开发者社区

如果要将数据实时增量采集到kafka,ob有类似MySQL的binlog的东西吗?

如果要将数据实时增量采集到kafka,ob有类似MySQL的binlog的东西吗?

问答 2023-06-18 来自:开发者社区

flinkcdc 监听解析mysql的binlog文件,相关的binlog offset是直接往状?

flinkcdc 监听解析mysql的binlog文件,相关的binlog offset是直接往状态存储了,那如果任务失败或者异常了,相关的offset已经被提交了,那如何保证数据不丢失呢?有没有大佬对这一块有做过验证的,下游算子的恢复如果没有使用状态,依托于flink的算子生命周期是否也是可以保证数据的精准一次?有大佬可以解答一下吗?这个其实我已经知道了,我好奇的是,如果中间缓存数据我没有使用....

问答 2023-06-18 来自:开发者社区

源库的mysql的binlog dump线程老是关闭

Otter版本:4.2.13 mysql版本:5.6 最近otter 的一个通道老是出现数据延迟同步,异常老是抛异常 然后在源库里执行show processlist 发现没有对应的binlog dump线程 然后重启该通道 ,在执行show processlist 该命令 发现有binlog dump线程,但是过一会儿该线程就消失了 紧接着就抛上面异常,各位大神有没有遇到这个问题呀 但是每次.....

问答 2023-06-16 来自:开发者社区

mysql源数据库版本5.17,没有binlog_checksum同步出错

启动同步报异常 现在的docker使用的canal版本时1.1.2吧 canal的这个问题不是已经解决了吗? 请问该怎么处理 原提问者GitHub用户vinnie888

问答 2023-06-11 来自:开发者社区

flink cdc在收到mysql binlog event时,是会等待其对应的被提交才下发这条?

flink cdc在收到mysql binlog event时,是会等待其对应的transaction被提交才下发这条binlog,还是会立即下发呢?

问答 2023-06-04 来自:开发者社区

各位大佬,flink mysql cdc 2.3 使用earliest-offset对binlog?

各位大佬,flink mysql cdc 2.3 使用earliest-offset对binlog有啥要求么,同步了一段时间发现数据停留在2天前,没有同步到新数据,flink也没有报错?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等