作者：张韬（伯略）出品：大淘宝技术ODPS(Open Data Processing Service)是一个海量数据处理平台，基于阿里巴巴自主研发的分布式操作系统(飞天)开发，是公司云计算整体解决方案中最核心的主力产品之一。本文结合作者多年的数仓开发经验，结合ODPS平台分享数据仓库中的SQL优化经验。背景数据仓库，是一个面向主题、集成的、随时间变化的、信息本身相对稳定的数据集合。数据仓库从Or....

文章 2023-06-12 来自：开发者社区

带你读《2022技术人的百宝黑皮书》——ODPS SQL优化总结(2)

带你读《2022技术人的百宝黑皮书》——ODPS SQL优化总结(1) https://developer.aliyun.com/article/1247150?groupCode=taobaotech基础知识经验总结与沉淀SQL的一些使用技巧 null我们在进行=/<>/in/not in等判断时，null会不包含在这些判断条件中，所以在对null的处理时可以使用nvl或者coal....

文章 2023-06-12 来自：开发者社区

带你读《2022技术人的百宝黑皮书》——ODPS SQL优化总结(3)

带你读《2022技术人的百宝黑皮书》——ODPS SQL优化总结(2) https://developer.aliyun.com/article/1247149?groupCode=taobaotech 窗口函数的使用可以通过 row_number()/rank() over(partition by order by )的方式实现数据按照某个字段分组的排序，也可以通过 max(struct()....

文章 2023-06-12 来自：开发者社区

带你读《2022技术人的百宝黑皮书》——ODPS SQL优化总结(4)

带你读《2022技术人的百宝黑皮书》——ODPS SQL优化总结(3) https://developer.aliyun.com/article/1247147?groupCode=taobaotech常用的参数设置常用的调整无外乎调整map、join、reduce的个数，map、join、reduce的内存大小。本文以ODPS的参数设置为例，参数可能因版本不同而略有差异。 Map设置set o....

文章 2023-06-12 来自：开发者社区

带你读《2022技术人的百宝黑皮书》——ODPS SQL优化总结(5)

带你读《2022技术人的百宝黑皮书》——ODPS SQL优化总结(4) https://developer.aliyun.com/article/1247146?groupCode=taobaotechReduce设置set odps.sql.reducer.instances=-1作用: 设定Reduce Task的Instance数量，手动设置区间在[1,99999]之间调整。不走HBO优化....

共有16条

< 1 2 >

跳转至： GO

更新时间 2023-06-13 11:08:24

本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。

SQL优化相关内容

SQL更多优化相关

SQL您可能感兴趣

产品推荐

数据库

分享数据库前沿，解构实战干货，推动数据库技术变革

+关注