spark考试

零，第0章-课程介绍

就是单纯的课程介绍

一，第1章-大数据技术概述

大数据的基本概念、关键技术和代表性软件

二，第2章-Scala语言基础

介绍Scala语言基础语法

三，第3章-Spark的设计与运行原理

Spark简介、运行架构、RDD的设计与运行原理、部署模式

四，第4章-Spark环境搭建和使用方法

Spark的基本安装方法，如何在spark-shell中运行代码以及如何开发Spark独立应用程序

五，第5章-RDD编程

RDD编程、键值对RDD、数据读写

六，第6章-Spark-SQL

Spark SQ简介、Dataframe、读写 Parquet、通过JDBC连接数据库、连接Hve读写数据

七，第7章-Spark-Streaming

流计算简介、Spark Streaming简介、DStream操作

八，第8章-Spark-MLlib

Spark MLlib简介、 spark.mllib库、 spark.ml库