视频课程:PySpark原理深入与编程实战
视频标题: PySpark SQL内置标量函数
发布时间:2025-11-27
视频描述
【PySpark原理深入与实战】配套精讲视频
为了帮助执行复杂的分析,PySpark SQL提供了一组强大而灵活的聚合函数、连接多个数据集的函数、一组内置的高性能函数和一组高级分析函数。为了有效地使用PySpark SQL执行分布式数据操作,必须熟练使用PySpark SQL函数。
PySpark SQL提供了大量的标量函数,主要完成:
- (1) 数学计算:例如abs()、hypot()、log()、cbrt(),等等。
- (2) 字符串操作:例如length()、trim()、concat(),等等。
- (3) 日期操作:例如year()、date_add(),等等。
课程章节 返回课程首页
-
Ch01 Spark架构与集群搭建
-
Ch02 开发和部署PySpark程序
-
Ch03 PySpark核心编程
-
Ch04 PySpark SQL编程(初级)
-
Ch05 PySpark SQL编程(高级)
-
Ch06 PySpark结构化流处理(初级)
-
Ch07 PySpark结构化流处理(高级)
-
ch08 PySpark大数据分析综合案例