当前位置:网站首页>spark analyze命令使用及其作用 map join broadcast join 广播join
spark analyze命令使用及其作用 map join broadcast join 广播join
2022-07-01 21:45:00 【健忘主义】
下附大量官方文档链接
使用
ANALYZE TABLE - Spark 3.0.0 Documentation
注意 hive中不支持该语法,必须用spark sql.
作用
为spark 任务join 提供参考.如果你analyze统计了表 并且<10MB 那么在join的时候就会使用 广播join,即broadcast join 即 map join.
// _ooOoo_
// o8888888o
// 88" . "88
// (| -_- |)
// O\ = /O
// ____/`---'\____
// . ' \\| |// `.
// / \\||| : |||// \
// / _||||| -:- |||||- \
// | | \\\ - /// | |
// | \_| ''\---/'' | |
// \ .-\__ `-` ___/-. /
// ___`. .' /--.
边栏推荐
猜你喜欢
linux下清理系统缓存并释放内存
快乐数[环类问题之快慢指针]
JS how to get a list of elements in a collection object
从零开始学 MySQL —数据库和数据表操作
Sonic云真机学习总结6 - 1.4.1服务端、agent端部署
Business visualization - make your flowchart'run'up
基于LSTM模型实现新闻分类
业务可视化-让你的流程图'Run'起来
List announced | outstanding intellectual property service team in China in 2021
微软、哥伦比亚大学|GODEL:目标导向对话的大规模预训练
随机推荐
Business visualization - make your flowchart'run'up
并发编程系列之FutureTask源码学习笔记
Unity 使用Sqlite
对象内存布局
The correct way to set the bypass route
详解Volatile关键字
多种智能指针
Electron学习(三)之简单交互操作
Clean up system cache and free memory under Linux
TOPS,处理器运算能力单位、每秒钟可进行一万亿次
MySQL learning notes - SQL optimization of optimization
手动实现function isInstanceOf(child,Parent)
linux下清理系统缓存并释放内存
【juc学习之路第9天】屏障衍生工具
指标陷阱:IT领导者易犯的七个KPI错误
[monomer] recommended configuration of streaming information i-bpsv3 server
Mask wearing detection method based on yolov5
Smart micro mm32 multi-channel adc-dma configuration
【MySQL】explain的基本使用以及各列的作用
Internet of things RFID, etc