阿里云文档 2025-03-21

冷热迁移

云原生数据仓库 AnalyticDB PostgreSQL 版数据冷热分层存储功能支持将不常访问的数据放到冷存介质以降低存储成本。除通过转冷函数手动将数据从热存迁移到冷存外,AnalyticDB PostgreSQL 7.0版数据存储冷热分层支持对分区表设置自动冷热迁移策略,并按照设置的冷热迁移策略自动地将数据从热存迁移到冷存。本文介绍如何通过固定热分区数HPN和固定保留时间TTL两种策略实现数据...

阿里云文档 2025-03-14

同步或迁移PostgreSQL数据库中vector类型的数据

在AI领域的大语言模型LLM(Large Language Model)应用中,检索增强生成RAG(Retrieval-augmented Generation)技术通过检索外部的辅助知识库,能够显著提升模型输出的准确性和时效性,解决了LLM知识更新慢、容易产生幻觉(回答不准确)的问题。与传统的关键词检索相比,向量检索具备语义层面的相似性检索能力,支持非结构化数据和多模态数据检索。PostgreS...

阿里云文档 2025-03-05

如何配置PostgreSQL输入组件用于读取数据源的数据

PostgreSQL输入组件用于读取PostgreSQL数据源的数据。同步PostgreSQL数据源的数据至其他数据源的场景中,您需要先配置PostgreSQL输入组件读取的源数据源,再配置数据同步的目标数据源。本文为您介绍如何配置PostgreSQL输入组件。

阿里云文档 2025-01-17

使用DTS同步数据时是否会自动同步增量数据

Q:使用DTS(数据传输服务)同步数据到云原生数据仓库 AnalyticDB PostgreSQL 版实例时,全量数据同步任务结束后是否会自动转为增量数据同步任务?云原生数据仓库 AnalyticDB PostgreSQL 版A:如果您的任务为数据同步任务,在全量数据同步任务结束后会自动开始同步增量...

阿里云文档 2024-10-17

如何使用mysql_fdw访问MySQL数据

云原生数据仓库AnalyticDB PostgreSQL版支持通过mysql_fdw插件直接访问和对MySQL服务器上的数据进行增删改查,无需将这些数据写入到云原生数据仓库AnalyticDB PostgreSQL版中。

文章 2023-10-20 来自:开发者社区

TiDB实时同步数据到PostgreSQL(三) ---- 使用pgloader迁移数据

pgloader是一款为PostgreSQL开发的数据迁移神器,支持从sqlite、MySQL、SQL Server等数据库往PostgreSQL迁移数据,也支持PostgreSQL到PostgreSQL、PostgreSQL到Citus。可自定义迁移规则,非常方便灵活。表结构、索引等都可以完整的迁移过来。pgloader采用Lisp开发,ubuntu下可使用apt install pgload....

文章 2023-10-08 来自:开发者社区

TiDB实时同步数据到PostgreSQL(二) ---- 使用TiCDC

为了从TiDB实时同步数据到PostgreSQL,就需要捕获数据的变化,TiDB提供了TiCDC。TiCDC的介绍和安装方法可参考官网(https://docs.pingcap.com/zh/tidb/v5.4/ticdc-overview)。TiCDC并不支持PostgreSQL做为下游输出,但可以通过TiCDC 开放数据协议或者TiCDC Canal-JSON Protocol将变化数据同步....

文章 2023-10-04 来自:开发者社区

TiDB实时同步数据到PostgreSQL(一) ---- 搭建kafka集群

业务系统早期采用LNMP架构,随着业务发展,数据量逐渐增加,主要业务表数据数据量均已过亿,加之产品设计原因,无法界定什么数据是历史数据,无法做冷热分离;业务又比较复杂,经常需要多张大表join查询;由于一些业务的特殊性以及架构原因,分库分表也很困难。几年前将数据库从MySQL迁移到TiDB,由于使用云服务器,又因为种种原因无法大量增加硬件,经常出现个别大用户一个大查询导致数据库雪崩,虽然可以通过....

文章 2022-02-17 来自:开发者社区

使用DTS从RDS PG实时同步数据到AnalyticDB for PostgreSQL

DTS支持从RDS PG将数据实时同步到AnalyticDB for PG,用户可以很方便的搭建起RDS PG到AnalyticDB for PG的数据同步,轻松实现数据的流转和复杂查询的优化。 使用DTS的前提条件 要求同步的数据表,必须建有主键(通过主键来保证源端和目标端表记录一致性)。 支持(INSERT/UPDATE/DELETE)语句的数据同步,不支持DDL及其它DML 语句(TRU.....

文章 2022-02-17 来自:开发者社区

使用DTS从MySQL实时同步数据到AnalyticDB for PostgreSQL

DTS支持从MySQL将数据实时同步到AnalyticDB for PostgreSQL,用户可以很方便的搭建起MySQL到AnalyticDB for PostgreSQL的数据同步,轻松实现数据的流转和复杂查询的优化。 前提条件 要求同步的数据表,必须建有主键(通过主键来保证源端和目标端表记录一致性)。 支持(INSERT/UPDATE/DELETE)语句的数据同步,及ALTER TABL.....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

相关镜像