Spark基础及源码分析视频

Spark基础及源码分析视频

课程介绍 视频以Java语言为蓝本,深入浅出的讲解scala语言的语法和特征,并应用scala语言,讲解spark生态系统下的大数据开发技术。

同学人数:383人 时长:22小时33分钟
第1章Scala语言环境安装、Scala的基本语法
1-1 认识Scala 09:30 需领取
1-2 安装开发环境 06:06 需领取
1-3 Scala Shell、用IDEA创建Maven项目 15:10 需领取
1-4 配置Maven本地仓库、导入切换项目等其它配置 07:50 需领取
1-5 变量的声明 06:44 需领取
1-6 Scala的7种值类型和条件表达式 08:32 需领取
1-7 for循环 13:15 需领取
1-8 方法和函数的声明以及方法转换成函数 18:00 需领取
1-9 数组 20:34 需领取
1-10 映射 09:02 需领取
1-11 元组 12:39 需领取
1-12 集合之Seq 18:33 需领取
1-13 集合之Set 07:56 需领取
1-14 集合之Map 05:51 需领取
第2章常用方法练习
2-1 lazy关键字 11:03 需领取
2-2 函数式编程练习之常用方法 26:16 需领取
2-3 函数式编程之reduce 14:31 需领取
2-4 函数式编程之fold 08:40 需领取
2-5 函数式编程之aggregate 07:19 需领取
2-6 函数式编程之交并差集 03:18 需领取
2-7 Scala实现WordCount 19:23 需领取
第3章面向对象、模式匹配
3-1 创建类、属性 20:40 需领取
3-2 构造器、辅助构造器 20:39 需领取
3-3 单例对象 15:11 需领取
3-4 伴生对象 10:29 需领取
3-5 apply和unapply方法 23:04 需领取
3-6 private关键字 14:41 需领取
3-7 特质、抽象类、继承、重写、实现等 20:01 需领取
3-8 模式匹配之匹配字符串 09:26 需领取
3-9 模式匹配之匹配类型 07:13 需领取
3-10 模式匹配之匹配数组、元组、集合 18:33 需领取
3-11 模式匹配之样例类 09:15 需领取
3-12 模式匹配之偏函数 08:41 需领取
第4章Actor、柯里化、隐式转换
4-1 作为值的函数 08:05 需领取
4-2 柯里化概念及声明方式 17:32 需领取
4-3 柯里化练习 10:44 需领取
4-4 隐式转换和隐式参数 11:18 需领取
4-5 隐式转换练习1 14:35 需领取
4-6 隐式转换练习2 18:20 需领取
4-7 泛型 11:59 需领取
4-8 UpperBound 12:45 需领取
4-9 ViewBound 16:12 需领取
4-10 ContextBound 10:36 需领取
第5章泛型、Akka
5-1 Actor概念 10:31 需领取
5-2 Actor实例之创建Actor 07:46 需领取
5-3 Actor实例之消息的接收与发送(异步没有返回值) 19:51 需领取
5-4 Actor实例之消息的接收与发送(同步有返回值) 04:53 需领取
5-5 Actor实例之消息的接收与发送(异步有返回值) 08:35 需领取
5-6 Actor实例之并行编程思想实现单词计数 30:24 需领取
5-7 Akka简介 10:15 需领取
5-8 Akka案例需求分析 08:06 需领取
5-9 Akka案例代码分析 20:59 需领取
第6章Spark集群安装、Spark任务提交、Spark实现WordCount并上传任务
6-1 Spark简介 11:38 需领取
6-2 Spark集群搭建、启动 06:44 需领取
6-3 Spark Shell.启动和提交任务 12:10 需领取
6-4 Spark WordCount 19:20 需领取
6-5 上传并执行任务 12:52 需领取
第7章RDD的基本概念、常用算子练习
7-1 RDD的概念 13:14 需领取
7-2 生成RDD的两种方式 05:35 需领取
7-3 两种类型的算子:transformation和action 18:41 需领取
7-4 常用算子练习1 24:29 需领取
7-5 常用算子练习2 16:57 需领取
第8章案例练习
8-1 案例需求-求用户在某基站停留的时间-1 12:56 需领取
8-2 案例实现-求用户在某基站停留的时间-2 21:36 需领取
8-3 案例实现-求用户访问学科的子网页top3 08:33 需领取
8-4 案例实现-求用户访问学科的子网页top3-chache、自定义分区器 19:18 需领取
第9章Spark集群启动流程和任务提交流程、案例练习
9-1 Spark集群启动流程 07:26 需领取
9-2 Spark任务提交流程 05:49 需领取
9-3 WordCount中创建了那些RDD 13:05 需领取
9-4 案例分析实现-按照IP统计区域访问量 21:57 需领取
第10章RDD的依赖关系、Stage划分、任务的生成、自定义排序
10-1 RDD之间的依赖关系 11:13 需领取
10-2 DAG的生成和stage的划分 11:31 需领取
10-3 WebUI观察stage划分和任务的生成 12:03 需领取
10-4 自定义二次排序 23:10 需领取
第11章Checkpoint、SparkSQL、Hive-On-Spark
11-1 checkpoint 16:04 需领取
11-2 SparkSQL介绍 08:25 需领取
11-3 创建DataFrame 09:21 需领取
11-4 DataFrame常用操作-DSL风格语法 10:14 需领取
11-5 DataFrame常用操作-SQL风格语法 03:35 需领取
11-6 通过反射推断Schema 18:03 需领取
11-7 通过StructType直接指定Schema 12:10 需领取
11-8 Hive-On-Spark 21:39 需领取
第12章 SparkStreaming、窗口操作、Spark-On-Yarn
12-1 SparkStreaming简介 09:07 需领取
12-2 实例分析:SparkStreaming获取Netcat产生的数据进行实时分析 06:49 需领取
12-3 SparkStreaming实现按批次累加 24:21 需领取
12-4 窗口函数概念及使用场景 17:28 需领取
12-5 窗口函数实现WordCount 08:35 需领取
12-6 Spark-On-Yarn 26:01 需领取
12-7 补充:SparkStreaming依赖 00:58 需领取
第13章源码分析:Spark启动流程、Stage划分、任务生成、任务提交流程
13-1 关于查看源码的一些介绍 09:05 需领取
13-2 导入源码 05:21 需领取
13-3 集群启动流程-Master类 23:16 需领取
13-4 集群启动流程-Worker类 12:46 需领取
13-5 SparkSubmit提交任务 09:01 需领取
13-6 SparkContext 17:09 需领取
13-7 创建DriverActor和ClientActor的过程 13:36 需领取
13-8 ClientActor向Master注册任务信息过程 07:32 需领取
13-9 任务调度的两种方式及Master通知Worker启动Executor的过程 10:58 需领取
13-10 Executor向DriverActor反向注册的过程 06:21 需领取
13-11 RDD生成和Stage划分 20:45 需领取
13-12 生成任务并提交 06:21 需领取
13-13 Task任务执行流程 10:56 需领取
13-14 总结-任务生成及提交流程 15:22 需领取
课程进阶
课程进阶
HTML5大前端开发
190位学生正在学习
加入QQ群
大数据交流群
群号:209080834

打开微信,点击底部的“发现”,
使用 “扫一扫” 即可将网页分享到我的朋友圈。

扣丁微信
扣丁小程序
15311698296

全国免费咨询热线

邮箱:codingke@1000phone.com

官方群:148715490

北京千锋互联科技有限公司版权所有   北京市海淀区宝盛北里西区28号天丰利商场4层
京ICP备12003911号-6   Copyright © 2013 - 2018

关注扣丁学堂微信

回复"279"
获取该课程提取码

微信扫一扫