阿里云文档 2025-02-11

创建Hive Catalog

配置Hive Catalog后,您可以在Flink开发控制台直接读取Hive元数据,无需再手动注册Hive表,提高作业开发的效率且保证数据的正确性。本文为您介绍如何配置Hive元数据、创建和使用Hive Catalog等。

阿里云文档 2025-01-17

如何在新版控制台使用Dataflow集群连接DLF并读取Hive全量数据

EMR-3.38.3后续版本、EMR-5.17.0之前版本的EMR集群可以使用数据湖元数据DLF(Data Lake Formation)服务对集群数据进行统一管理,EMR中的Flink组件在开源Flink基础上增加了与DLF适配的功能。本文为您介绍如何在EMR集群上通过Flink SQL创建Hive Catalog连接到DLF,并读取Hive全量数据。

问答 2024-01-04 来自:开发者社区

请教一下怎么用flinksql 写一个连接带有kerberos 认证的 hive 的catalog?

请教一下怎么用flinksql 写一个连接带有kerberos 认证的 hive 的catalog?

文章 2023-12-06 来自:开发者社区

Apache Flink目前不支持直接写入MaxCompute,但是可以通过Hive Catalog将Flink的数据写入Hive表

Apache Flink目前不支持直接写入MaxCompute,但是可以通过Hive Catalog将Flink的数据写入Hive表,然后再通过Hive与MaxCompute的映射关系将数据同步到MaxCompute。 首先,你需要在Flink中配置Hive Catalog,然后创建一个Hive表,这个表的存储位置指向MaxC...

问答 2023-11-08 来自:开发者社区

flink读取hive表数据(catalog形式)。怎么转换为会报错?

flink读取hive表数据(catalog形式)。怎么转换为会报错?启动命令是yarn-per-job

问答 2023-08-28 来自:开发者社区

我在类型是hive的iceberg catalog里面建不了CDC的表, 这操作问题 还是?

我在类型是hive的iceberg catalog里面建不了CDC的表, 这操作问题 还是iceberg的bug呀?

问答 2023-08-20 来自:开发者社区

哈喽大家有遇到Flink一个问题么?我hive catalog单元测试用hive方言在hive建分区

哈喽大家有遇到Flink一个问题么?我hive catalog单元测试用hive方言在hive建分区表没问题,但是在项目里就解析同一个sql会报错

问答 2023-07-13 来自:开发者社区

flink sql不同通过jdbc连接hive吗?只能创建catalog加载整个库?那么不同hive

flink sql不同通过jdbc连接hive吗?只能创建catalog加载整个库?那么不同hive库,之间如何进行交互呢?

问答 2023-06-05 来自:开发者社区

在机器学习PAI我用hive catalog读取Hive数据时,该字段数据的精度都不高,怎么处理?

在机器学习PAI我用hive catalog读取Hive数据时,源表有timestamp类型的字段会报 HiveCatalog currently only supports timestamp of precision 9 ,但是我看了下该字段数据的精度,都是不高的。怎么处理?2023-05-31 17:09:46.949 [INFO]: -> Use one of the followi...

问答 2023-06-05 来自:开发者社区

在机器学习PAI当我用hive catalog读取hive数据时,为什么表中有这个字段,就会报错?

在机器学习PAI当我用hive catalog读取hive数据时,如果表中有timestamp类型字段,就会报错,什么原因?ClassCastException:org.apache.flink.table.data.TimestampData cannot be cast to java.time.LocalDateTime

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐