阿里云文档 2024-12-18

基于Flink+MongoDB+Hologres的用户行为数据分析

用户行为数据通常具有庞大的数据量,存储成本较高,且缺乏统一的格式,导致处理难度较大。常用的宽表模型虽查询效率高,但冗余度高、存储空间大、维护复杂,更新慢。本文基于Flink+MongoDB+Hologres更好地实现宽表的数据分析,以游戏行业的用户行为数据分析为示例,构建用户行为数据宽表进行数据分析的方案。

问答 2024-08-13 来自:开发者社区

MongoDB CDC 在Flink CDC 2.2 版本中相比2.1版本有哪些改进?

MongoDB CDC 在Flink CDC 2.2 版本中相比2.1版本有哪些改进?

问答 2024-07-15 来自:开发者社区

在Flink CDC中mongodb 运行在 atlas 是不是没法开启权限呀?

在Flink CDC中mongodb 运行在 atlas 是不是没法开启 ‘splitVector’ Action 权限呀?

问答 2024-07-15 来自:开发者社区

在Flink CDC中mongodb cdc拉不到数据,如何解决?

在Flink CDC中mongodb cdc拉不到数据,如何解决?WARN o.a.f.c.base.source.reader.fetcher.SplitFetcherManager - Failed to close the source reader in 30000 ms. There are still 1 split fetchers runningWARN c.v.c.c.b...

问答 2024-06-26 来自:开发者社区

在Flink CDC中mongodb为什么同步完表里面的数据之后,作业就变成finished了呀?

在Flink CDC中mongodb为什么同步完表里面的数据之后,作业就变成finished了呀?

文章 2024-06-15 来自:开发者社区

实时计算 Flink版产品使用问题之如何使用Flink MongoDB Connector连接MongoDB

问题一:flink cdc 在从Oracle拉取数据的时候造成Oracle归档日志暴涨,是什么原因? flink cdc 在从Oracle拉取数据的时候造成Oracle归档日志暴涨,是什么原因? 参考答案: 因为flink cdc会捕获所有数据的操作,比如insert、update、delete等等,这些操作会被记录在Oracle的归档日志中。特别是对...

实时计算 Flink版产品使用问题之如何使用Flink MongoDB Connector连接MongoDB
文章 2024-05-23 来自:开发者社区

实时计算 Flink版操作报错之使用mongodb cdc时报错Command failed with error 40573,是什么导致的

问题一:Flink CDC1.15怎么配置server-id 我跑整库同步任务跑的跑的就报错说冲突? Flink CDC1.15怎么配置server-id 我跑整库同步任务跑的跑的就报错说冲突? 参考回答:...

实时计算 Flink版操作报错之使用mongodb cdc时报错Command failed with error 40573,是什么导致的
文章 2024-05-23 来自:开发者社区

实时计算 Flink版产品使用合集之读取 Kafka 和 MongoDB 的 Managed Memory 使用情况不同是什么导致的

问题一:Flink CDC有老师遇到过 polarDB 的 mysql-cdc 有问题的? Flink CDC有老师遇到过 polarDB 的 mysql-cdc 有问题的?按照 flink vvp 的官方文档配置的,现在看起来只有 gtid-set 能读取到数据 参考回答: Flink CDC在处理polarDB的mysql-cdc时,如果只有gti...

文章 2024-05-23 来自:开发者社区

实时计算 Flink版产品使用合集之MongoDB CDC无法读取到变更流的原因是什么

问题一:Flink CDC中mysql cdc全量阶段可以多并行度云行,并行度是单并行度还是多并行度呀? Flink CDC中mysql cdc全量阶段可以多并行度云行,全量转增量后,并行度是单并行度还是多并行度呀? 参考回答: 在Flink CDC中,MySQL CDC库在全量阶段可以使用多个并行度进行处理。这意味着可以将全量数据的抽取和处理任务划分...

实时计算 Flink版产品使用合集之MongoDB CDC无法读取到变更流的原因是什么
文章 2024-05-23 来自:开发者社区

实时计算 Flink版产品使用合集之提高 MongoDB Source的消费速率如何解决

问题一:控制 Flink CDC mongo source 的消费速率,这个有朋友了解吗? 控制 Flink CDC mongo source 的消费速率,这个有朋友了解吗? 参考回答: Flink CDC MongoDB Source 提供了一些参数来控制消费速率。具体来说,你可以通过配置 flink.cdc.consumer.max-events-...

实时计算 Flink版产品使用合集之提高 MongoDB Source的消费速率如何解决

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

NoSQL数据库

阿里云NoSQL数据库提供了一种灵活的数据存储方式,可以支持各种数据模型,包括文档型、图型、列型和键值型。此外,它还提供了一种分布式的数据处理方式,可以支持高可用性和容灾备份。包含Redis社区版和Tair、多模数据库 Lindorm、MongoDB 版。

+关注
相关镜像