阿里云文档 2025-06-26

MySQL分库分表同步至MaxCompute

数据集成目前支持将MySQL、PolarDB等源头的分库分表数据实时同步至MaxCompute。本文以MySQL分库分表实时写入MaxCompute场景为例,为您介绍如何通过数据集成同步分库分表数据至MaxCompute。

阿里云文档 2024-10-23

如何将MySQL分库分表的数据写入Hologres同一个表中

本文为您介绍如何通过DataWorks数据集成和Flink两种方式将MySQL分库分表的数据写入至Hologres同一个表中,通过本实践您可以根据业务场景选择合适的方式将MySQL分库分表数据写入Hologres。

文章 2017-11-23 来自:开发者社区

MySQL分库分表分库后的查询(8th)

前言 这边我们以使用python程序要展示一下再分库分表后,我们需要如何对数据库进行操作。 python操作数据库 我们这边还是沿用之前的那5中: 场景1:购买者下订单 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 ...

文章 2017-11-15 来自:开发者社区

MySQL分库分表分表后数据的查询(5th)

前言 在分表完之后显然对于数据的查询会变的比较的复杂,特别是在表的关联方面,在有些情况下根本就不能使用JOIN。 其实个人是比较鼓励将那些大的JOIN SQL拆分成几个小的SQL来查询数据。这样虽然总体的效率可能会稍稍下降(如果使用了连接池完全可以忽略),但是查询的语句变简单了,使得后续的维护带来的方便。同时也能带来比较便利的扩展。你可以感受一下有一个100行的SQL语句给你维护,和给你10个1....

文章 2017-11-15 来自:开发者社区

MySQL分库分表分库准备(6th)

前言 随着业务的发展单库中的分表的数量越来越多, 使用在单库上存放过多的表这样是不合理的。因此,我们就需要考虑将数据根据数据库进行拆分。 一般mysql不建议表的数量超过1000个。当然,这不能一概而论,还需要根据你的数据量,和硬件来确定然后根据自己的服务器调整几个mysql '%open%' 参数,从而来确定你的库应该不超过几张表性能能在可接受范围内。 分库思路 在分库前我们需要确定一下我们应....

文章 2017-11-14 来自:开发者社区

MySQL分库分表单库分表和迁移数据(4th)

前奏 因为在分表的时候我们需要知道我们分的是第几个表,所以我们先需要初始化我们的分表号 我们的目标 1、我们的目标是实现能手动指定创建多少张表,并且能手动指定哪些用户到哪些表中。 2、最终能通过一定的算法,自动化这些分表迁移数据的工作。 在这里我们来实现 '1' 手动指定, 以下可能比较枯燥都是代码了, 一般只要看主逻辑有一个思路,代码自己玩转它 ^_^ 程序流程图 代码主逻辑展示 在附...

MySQL分库分表单库分表和迁移数据(4th)
文章 2017-11-08 来自:开发者社区

MySQL分库分表python实现分库(7th)

理清思路 现在我们分为两大个步骤: 1、创建分库,并在分库中创建分表。 2、能指定用户的数据到特定的库和表。   现在我们有两个数据库了: 1、test库:里面存放了公共访问的数据表,因此在python我们需要有一个公共数据源。 2、test_1分库:里面存放的是需要分表的表和数据,因此我们需要一个用户原数据所在的数据源。 3、test_n分库:此库是用户的数据需要迁移到其他库的库,因此...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

数据库

数据库领域前沿技术分享与交流

+关注
相关镜像
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等

登录插画

登录以查看您的控制台资源

管理云资源
状态一览
快捷访问