阿里云文档 2024-12-23

开发及部署基于Hologres连接器的 Flink DataStream作业

Hologres与Flink全托管高度兼容,多数情况下您可以使用Flink SQL的方式,声明Hologres的源表、维表及结果表,进而使用SQL表达数据的处理逻辑。但对于特殊业务场景,Flink SQL方式无法满足业务计算时,您需要使用DataStream的方式读写数据。本文以VVR-8.0.8-Flink-1.17版本为例,为您完整地展示如何调试和开发基于Hologres连接器的DataStr...

阿里云文档 2024-11-28

通过DSW提交Spark应用

交互式建模(DSW)是PAI产品的云端机器学习开发IDE,支持多种语言及开发环境。您可以在DSW实例中连接云原生数据仓库 AnalyticDB MySQL 版集群,并通过其集成的Notebook、Terminal等开发环境编写PySpark脚本,提交Spark作业。本文为您介绍通过DSW实例提交Spark作业的具体操作步骤。

阿里云文档 2024-11-19

通过PySpark开发Spark应用

本文介绍了如何开发AnalyticDB for MySQL Spark Python作业,以及如何通过VirtualEnv技术打包Python作业的运行环境。

阿里云文档 2024-07-30

通过Docker镜像启动Jupyter交互式环境并提交Spark作业

云原生数据仓库 AnalyticDB MySQL 版Spark支持使用Docker镜像快速启动Jupyter交互式开发环境,帮助您使用本地Jupyter Lab连接AnalyticDB for MySQL Spark,从而利用AnalyticDB for MySQL的弹性资源进行交互测试和计算。

阿里云文档 2024-07-30

通过Java SDK开发Spark应用

云原生数据仓库 AnalyticDB MySQL 版集群支持通过Java SDK开发Spark应用和Spark SQL作业。本文介绍通过Java SDK提交Spark作业、查询Spark作业的状态和日志信息、结束Spark作业以及查询Spark历史作业的操作步骤。

文章 2023-10-10 来自:开发者社区

数仓学习---11、数仓开发之DWS层

数仓学习---11、数仓开发之DWS层

数仓学习---11、数仓开发之DWS层
问答 2022-05-10 来自:开发者社区

过去数仓的开发往往采用ODS->DWD->DWS->ADS逐层开发的方法,这样的好处和弊端都有哪些?

过去数仓的开发往往采用ODS->DWD->DWS->ADS逐层开发的方法,这样的好处和弊端都有哪些?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

数据仓库

阿里云自主研发的云原生数据仓库,具有高并发读写、低峰谷读写、弹性扩展、安全可靠等特性,可支持PB级别数据存储,可广泛应用于BI、机器学习、实时分析、数据挖掘等场景。包含AnalyticDB MySQL版、AnalyticDB PostgreSQL 版。

+关注