Spark SQL分析Nginx访问日志 _技术问答

首页免费课 Spark SQL分析Nginx访问日志问答

Spark SQL分析Nginx访问日志

                
                小简同学
            全栈工程师

                    查看讲师更多课程 
                    小简同学讲师的其他课程
                
Spark2.x+协同过滤算法，开发企业级个性化推荐系统
实战·中级·327

                                                                                                                                    ￥388.00
                                            
Spark+ES+ClickHouse 构建DMP用户画像
实战·中级·299

                                                                                                                                    ￥399.00
                                            
Flink 从0到1实战实时风控系统
实战·初级·196

                                                                                                                                    ￥299.00
                                            
                难度中级
            
                时长 2小时40分
            
                学习人数
            
综合评分9.90
                            6人评价
                        查看评价
                                10.0
                                内容实用
                            
                                9.7
                                简洁易懂
                            
                                10.0
                                逻辑清晰

全部评论问答未解决精华

WaniuZhang_ITBoy

agg的原理和功能可以讲一下么，老师

0 3-2 聚合操作：groupBy和agg

2019-09-22

慕少9264379

还不错，感谢老师！只是不懂scala和java，效果大打折扣了

0 6-1 课程总结

2019-09-21

云技术

UDF注册：
1、spark sql 注册方式（只能对sql() 可见）
2、DataFrame注册方式（对外部可见）

1 4-1 自定义函数：UDF

2019-09-18

云技术

full out join例子：
df_1.join(df_2,
df_1("uid") === df_2("u_id"),
"full"
).show

1 3-5 多表操作：join （2）

2019-09-18

云技术

df.withColumn("op_phone",concat(lit("广州",col("op_phone").show

1 3-3 单表操作：列的增删改与空值处理

2019-09-18

云技术

groupby + agg组合使用

2 3-2 聚合操作：groupBy和agg

2019-09-18

WaniuZhang_ITBoy

老师的口音有点出戏

1 2-2 Spark SQL运行原理

2019-09-17

慕沐0122025

感谢老师。

1 1-1 课程简介

2019-09-07

慕少3238855

老师有ppt可以下载吗？

0 2-2 Spark SQL运行原理

2019-09-06

开始学习

课程须知: 本课程不是Spark零基础入门课程，需要同学们在学习之前： 1、熟悉Spark的RDD是什么 2、用Spark Shell写过简单的迭代运算 3、使用过Scala开发简单的Spark项目 4、了解Hadoop的HDFS原理 5、了解Hive的简单使用 6、了解Linux基本命令 7、有Java开发基础

老师告诉你能学到什么？: 1、DataFrame/DataSet查询操作（过滤，分组，排序） 2、Spark SQL自定义函数和窗口函数 3、Parquet列式存储

微信扫码，参与3人拼团

热搜

最近搜索清空

Spark SQL分析Nginx访问日志