SparkSQL的UDF及分析案例，220725，

 

 

 

 

 

 

 

 

mysql5和8，类名不一样，，，

 

 

 

 

Metastore提供元数据接口，为外部计算引擎提供，，共享，，

 

 

笛卡尔积

 DSL：DataFrame

spark临时数仓，，

 

 

 

 

 

 数据解密，定制化操作，，

 

有配置metastore，先启动meta，再启动hive，，

就是之前没见过直接启动hiveserver2的情况   不一定会用Metastore，用于共享，，

 

"null" , None

总共13位，以毫秒为单位，，

from_unixtime

 unix_timestamp

DataFrame

 

 

 

 每xxx，需要分组，，，

sum() over(partition by 省份）

 或省份、订单个数

加orderby，到当前行，，

 

 

 

 一定是先开启ThriftServer

 

 

 

 

 

 

 

 

 

 

 

 

 review，，

 

 

 有时间把回顾2看完：：：：