文章 2023-02-09 来自:开发者社区

五、【计算】Spark原理与实践(下) | 青训营笔记

 引言学习的最大理由是想摆脱平庸,早一天就多一份人生的精彩;迟一天就多一天平庸的困扰。 热爱写作,愿意让自己成为更好的人............铭记于心✨我唯一知道的,便是我一无所知✨三、SparkSQL:1 名词解析DataFrame: 是一种以RDD为基础的分布式数据集, 被称为SchemaRDDCatalyst:SparkSQL核心模块,主要是对执行过程中的执行计划进行处理和优化DataS....

五、【计算】Spark原理与实践(下) | 青训营笔记
文章 2022-11-30 来自:开发者社区

Spark 原理 | 青训营笔记

Spark 原理 | 青训营笔记这是我参与「第四届青训营 」笔记创作活动的的第4天参考链接:1.第四届字节跳动青训营2.RDD介绍大数据处理引擎Spark介绍Spark生态组件:Spark Core:Spark核心组件,它实现了Spark的基本功能,包含任务调度、内存管理、错误恢复、与存储系统交互等模块。Spark SQL:用来操作结构化数据的核心组件,通过Spark SQL可以直接查询Hive....

Spark 原理 | 青训营笔记

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!

+关注