文章 2022-02-16 来自:开发者社区

机票业务(单实例 2700万行/s return)数据库架构设计 - 阿里云RDS PostgreSQL最佳实践

背景 机票业务的某个模块,数据量10亿+,写、更新、删除量较低。根据KEY查询一些数据,每次查询返回1万条左右的记录。 就是这样简单的需求,业务方发现读成为了巨大的瓶颈,每次返回1万条,100个并发请求,每秒就是100万条(500MB左右),主要的瓶颈: 1、网络是个较大的开销。 2、不同KEY的数据可能是分散存放的,存在查询时的IO放大,可能有一定的性能影响。 3、每次请求的返回记录数较多,数....

机票业务(单实例 2700万行/s return)数据库架构设计 - 阿里云RDS PostgreSQL最佳实践
文章 2022-02-16 来自:开发者社区

云端海量任务调度系统数据库设计 - 阿里云RDS PostgreSQL案例

标签 PostgreSQL , 任务调度系统 , 数据库设计 , schemaless 背景 任务调度系统中的任务状态管理,通常会用到数据库来存储任务调度的过程状态,控制任务的锁等。 《advisory lock 实现高并发非堵塞式 业务锁》 如果是小量任务,是挺好实现的,但是每小时处理几十亿或者几亿的任务,如何设计这样的任务状态管理数据库呢? 挑战 对于一个面向多个用户的任务调度平台(例...

云端海量任务调度系统数据库设计 - 阿里云RDS PostgreSQL案例
文章 2022-02-15 来自:开发者社区

Azure SQL数据库迁移阿里云RDS SQLserver实践

    一、背景          由于尝试直接使用DTS工具迁移,从微软云迁移SQL数据库到RDS SQLserver时发现,DTS虽然能够连接到Azure SQL, 但是无法获取结构,主要由于Azure SQL是微软针对微软云定制的数据库版本。与原本的MSSQL server还是不一样的。为了方...

文章 2022-02-15 来自:开发者社区

数据库连接数过万的真相,原来我们错怪阿里云RDS了

在一次数据库连接问题中,我们坚持认为数据库连接数过万是阿里云RDS的问题,但后来阿里云提供了当时的数据库连接情况,让我们动摇了自己的想法。 上面这5个帐户产生了10030个数据库连接,当看前4个帐户(产生了9511个连接)的名称时,我们打了一个寒颤 —— 这些都是运行 Linux 上的 ASP.NET Core 站点。。。这不是巧合,其中必有蹊跷。随后,我们观察了主备库切换后的 RDS 中...

问答 2022-02-15 来自:开发者社区

ogg是否支持目标端数据库是在阿里云的RDS云MYSQL

源端是Oracle数据库,目标端是阿里云的RDS云MYSQL。这样是否适合做数据同步 遇到了同样的问题,在CSDN看到了,希望阿里云团队能够给出正确、标准的答案~请查看

问答 2022-02-15 来自:开发者社区

各位好,咨询一个PostgreSQL的架构问题。 我希望写入PostgreSQL的动作可以被捕获并写入到指定Kafka队列中,随后异步更新到Elastic数据库。打算采用 https://debezium.io/docs/connectors/postgresql 方案,读取数据库日志流的模式,这样可以避免在程序代码层既写PostgreSQL又写Kafka带来的分布式事务问题。 在本地部署模式下这个架构没问题,但是如果采用阿里云RDS的PostgreSQL还能支持这种架构方案吗?

各位好,咨询一个PostgreSQL的架构问题。 我希望写入PostgreSQL的动作可以被捕获并写入到指定Kafka队列中,随后异步更新到Elastic数据库。打算采用 https://debezium.io/docs/connectors/postgresql 方案,读取数据库日志流的模式,这样可以避免在程序代码层既写PostgreSQL又写Kafka带来的分布式事务问题。 在本地部署模式下....

问答 2022-02-15 来自:开发者社区

IDC数据库迁移到阿里云VPC下的RDS

IPSEC VPN已建立,可ping通,需要数据迁移配置帮助

问答 2022-02-15 来自:开发者社区

为啥本地数据库客户端连接不到阿里云数据库rds

为啥本地数据库客户端连接不到阿里云数据库rds

文章 2022-02-14 来自:开发者社区

RDS-sql server使用DTS进行数据库迁移,同阿里云RDS数据库迁移

 目录RDS-sql server使用DTS进行数据库迁移,同阿里云RDS数据库迁移背景:环境调研:问题:1:OA程序文件如何迁移?2:RDS-sql server数据库文件如何迁移?迁移思路:失败思路总结:迁移过程:1:OA程序文件迁移2:数据库文件迁移2.1 使用OSS桶恢复 2.1.1 获取源数据库文件。2.1 2上传源数据库备份文件到oss桶中,尝试OSS备份恢复 2.1.3 ....

RDS-sql server使用DTS进行数据库迁移,同阿里云RDS数据库迁移

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

数据库

数据库领域前沿技术分享与交流

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等