问答 2024-01-09 来自:开发者社区

Flink CDC首次全量同步几百万数据,状态后端增量方式的rocksdb,正常的吗?

Flink CDC首次全量同步几百万数据,状态后端增量方式的rocksdb,目前Checkpointed Data Size 基本接近Full Checkpoint Data Size大小,正常的吗?ck耗时也很长,请问可以从哪些方面优化优化?

问答 2023-12-10 来自:开发者社区

Flink CDC管理内存webui上一直是百分百这个是啥原因导致的?状态后端用的是rocksdb?

Flink CDC管理内存webui上一直是百分百这个是啥原因导致的?状态后端用的是rocksdb?

文章 2023-10-11 来自:开发者社区

Flink---12、状态后端(HashMapStateBackend/RocksDB)、如何选择正确的状态后端

                                                        &...

Flink---12、状态后端(HashMapStateBackend/RocksDB)、如何选择正确的状态后端
问答 2023-08-01 来自:开发者社区

Flink CDC状态后端用rocksdb时候, 项目启动报错failed to 这个是啥情况呢?

Flink CDC状态后端用rocksdb时候, 项目启动报错failed to map segment from shared object 这个是啥情况呢?

问答 2023-03-13 来自:开发者社区

关于Flink CDC,状态后端 hsahmap时是正常的1秒几万条数据,改为rocksdb就非常慢

关于Flink CDC,状态后端 hsahmap时是正常的1秒几万条数据,改为rocksdb就非常慢变成1秒几百条数据,我看磁盘io没有一点压力,我想知道是为什么?

问答 2021-12-07 来自:开发者社区

关于flink状态后端使用Rocksdb序列化问题

目前采用flink on yarn, flink版本是1.7.2,hadoop是2.8.5 现在遇到个问题,假设订单对象Order,因使用了窗口等,所以有状态产生,假设现在要在Order中添加几个新的字段,采用savepoint重启任务,就会报错,看错误信息是反序列化问题(rocksdb默认用的kryo), 只能kill掉再重启,导致状态丢失,请问有什么解决办法吗?需求不断变更,肯定会定期增加.....

问答 2021-11-17 来自:开发者社区

Flink的状态后端RocksDB的优点是什么?

Flink的状态后端RocksDB的优点是什么?

问答 2020-01-03 来自:开发者社区

请教一下,flink任务不开启checkpoint的话,状态后端采用rocksdb的话,这种情况的出

请教一下,flink任务不开启checkpoint的话,状态后端采用rocksdb的话,这种情况的出来逻辑大概是什么样的呀?每条状态都读写rocksdb吗? 本问题来自阿里云开发者社区的【11大垂直技术领域开发者社群】。 点击这里欢迎加入感兴趣的技术领域群。

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注