当前位置:网站首页>在实践中学习Spark计算框架(00)
在实践中学习Spark计算框架(00)
2022-06-29 09:26:00 【X.IO】
Spark编程基础:00.初步了解
参考书籍:厦门大学-林子雨-Spark编程基础
————————————————————
先修课程:(当前状况:了解)
1.大数据技术导论:《大数据技术原理与应用》
2.数据库系统原理:(了解关系数据库与SQL语句)
3.编程能力:(了解面向对象编程基础知识,如Java、C++)
————————————————————
《Spark编程基础》简介:
以 Scala 作为开发 Spark 应用程序的编程语言。
全书共 8 章:
1.大数据技术概述
2.Scala语言基础
3.Spark的设计与运行原理
4.Spark环境搭建和使用方法
5.RDD编程
6.Spark SQL
7.Spark Streaming
8.Spark MLlib
————————————————————
课程实验:
实验一:Linux 系统的安装和常用命令
实验二:Scala 编程初级实践
实验三:Spark 和Hadoop的安装
实验四:RDD 编程初级实践
实验五:Spark SQL 编程初级实践
实验六:Spark Streaming 编程初级实践
实验七:Spark 机器学习库 MLlib 编程实践
综合实验:
案例一:淘宝双十一数据分析与预测
案例二:Spark+Kafka 构建实时分析 Dashboard 案例
(持续更新、完善中。。。)
边栏推荐
猜你喜欢

Simulation problem of two stacks

函数指针、函数指针数组、计算器+转移表等归纳总结

2021年团体程序设计天梯赛-模拟赛

查看CSDN的博客排名

1146 topological order (25 points)

Application of keil5 integrated development environment for single chip microcomputer

云主机端口扫描

520 钻石争霸赛 2021

EDA与VHDL题库

This open source project is super wow, and handwritten photos are generated Online
随机推荐
MySQL中的alter table操作之add/modify/drop列
1147 heaps (30 points)
完全二叉树的权值 递归做法 ——最后的编程挑战
Web漏洞手动检测分析
Signal works: time varying and time invariant
Summary after the 2009 ICPC Shanghai regional competition
L1-009 N个数求和 (20 分)
在VMware workstation中安装WMware ESXi 6.5.0并进行配置
Application of keil5 integrated development environment for single chip microcomputer
std::unique_ptr<T>与boost::scoped_ptr<T>的特殊性
Recyclerview universal adapter package
Virtual machine port scanning
JNI.h说明
L2-025 divide and rule (25 points)
Maze walking BFS medium + -- the last programming challenge
2020-09-21 visual studio header file and Library Directory configuration
HDU 6778 car (group enumeration -- > shape pressure DP)
【51nod 1215】数组的宽度
1021 Deepest Root (25 分)
[51nod 1215] array width