IT码上发视频教程
标题:
大数据Spark视频教程- 2019千锋
[打印本页]
作者:
itmsf
时间:
2019-5-21 22:53
标题:
大数据Spark视频教程- 2019千锋
大数据Spark视频教程- 2019千锋
〖课程介绍〗:
〖课程目录〗:
├─第01章 Scala语言环境安装、Scala的基本语法(14集)
│ 01.认识scala
│ 02.安装开发环境
│ 03.cala Shell、用idea创建maven项目-1
│ 04.配置maven本地仓库、导入切换项目等其它配置
│ 05.变量的声明
│ 06.scala的7种值类型和条件表达式
│ 07.for循环
│ 08.方法和函数的声明以及方法转换成函数
│ 09.数组
│ 10.映射
│ 11.元组
│ 12.集合之seq
│ 13.集合之set
│ 14.集合之map
│
├─第02章 常用方法练习(7集)
│ 15.lazy关键字
│ 16.函数式编程练习之常用方法
│ 17.函数式编程之reduce
│ 18.函数式编程之fold
│ 19.函数式编程之aggregate
│ 20.函数式编程之交并差集
│ 21.scala实现wordcount
│
├─第03章 面向对象、模式匹配(12集)
│ 22.创建类、属性
│ 23.构造器、辅助构造器
│ 24.伴生对象
│ 25.apply和unapply方法
│ 26.private关键字
│ 27.特质、抽象类、继承、重写、实现等
│ 28.模式匹配之匹配字符串
│ 29.模式匹配之匹配类型
│ 30.模式匹配之匹配数组、元组、集合
│ 31.模式匹配之样例类
│ 32.模式匹配之偏函数
│ 33.单例对象
│
├─第04章 Actor、柯里化、隐式转换(10集)
│ 34.作为值的函数
│ 35.柯里化概念及声明方式
│ 36.柯里化练习
│ 37.隐式转换和隐式参数
│ 38.隐式转换练习
│ 39.隐式转换练习
│ 40.泛型
│ 41.upperbound
│ 42.viewbound
│ 43.contextbound
│
├─第05章 泛型、Akka(9集)
│ 44.actor概念
│ 45.actor实例之创建actor
│ 46.actor实例之消息的接收与发送(异步没有返回值)
│ 47.actor实例之消息的接收与发送(同步有返回值)
│ 48.actor实例之消息的接收与发送(异步有返回值)
│ 49.actor实例之并行编程思想实现单词计数
│ 50.akka简介
│ 51.akka案例需求分析
│ 52.akka案例代码分析
│
├─第06章 Spark集群安装、Spark任务提交、Spark实现WordCount并上传任务(5集)
│ 53.spark简介
│ 54.spark集群搭建、启动
│ 55.spark Shell.启动和提交任务
│ 56.spark Wordcount
│ 57.上传并执行任务
│
├─第07章 RDD的基本概念、常用算子练习(5集)
│ 58.rdd的概念
│ 59.生成rdd的两种方式
│ 60.两种类型的算子:transformation和action
│ 61常用算子练习
│ 62.常用算子练习
│
├─第08章 案例练习(4集)
│ 63.案例需求-求用户在某基站停留的时间
│ 64.案例实现-求用户在某基站停留的时间
│ 65.案例实现-求用户访问学科的子网页top
│ 66.案例实现-求用户访问学科的子网页top3-chache、自定义分区器
│
├─第09章 Spark集群启动流程和任务提交流程、案例练习(4集)
│ 67.spark集群启动流程
│ 68.spark任务提交流程
│ 69.wordcount中创建了那些rdd
│ 70.案例分析实现-按照ip统计区域访问量
│
├─第10章 RDD的依赖关系、Stage划分、任务的生成、自定义排序(4集)
│ 71.rdd之间的依赖关系
│ 72.dag的生成和stage的划分
│ 73.webui观察stage划分和任务的生成
│ 74.自定义二次排序
│
├─第11章 Day11 Checkpoint、SparkSQL、Hive-On-Spark(8集)
│ 75.checkpoint
│ 76.sparksql介绍
│ 77.创建dataframe
│ 78.dataframe常用操作-dsl风格语法
│ 79.dataframe常用操作-sql风格语法
│ 80.通过反射推断schema
│ 81.通过structtype直接指定schema
│ 82.hive-on-spark
│
├─第12章 SparkStreaming、窗口操作、Spark-On-Yarn(7集)
│ 83.sparkstreaming简介
│ 84.实例分析:sparkstreaming获取netcat产生的数据进行实时分析
│ 85.sparkstreaming实现按批次累加
│ 86.窗口函数概念及使用场景
│ 87.窗口函数实现wordcount
│ 88.spark-on-yarn
│ 89.补充:sparkstreaming依赖
│
└─第13章 源码分析:Spark启动流程、Stage划分、任务生成、任务提交流程(14集)
14、总结-任务生成及提交流程
90.关于查看源码的一些介绍
91.导入源码
92.集群启动流程-master类
93.集群启动流程-worker类
94.sparksubmit提交任务
95.sparkcontext
96.创建driveractor和clientactor的过程
97.clientactor向master注册任务信息过程
98.任务调度的两种方式及master通知worker启动executor的过程
100.executor向driveractor反向注册的过程
101.rdd生成和stage划分
102.生成任务并提交
103.task任务执行流程
〖百度网盘下载地址〗:
QQ截图20190521213924.png
(31.23 KB, 下载次数: 65)
下载附件
2019-5-21 21:40 上传
---------------------------------华丽分割线--------------------------------华丽分割线-------------------华丽分割线-------------------------华丽分割线----------------
〖下载地址失效反馈〗:
如果下载地址失效,请尽快反馈给我们,我们尽快修复。反馈地址:
https://www.itmsf.com/forum-66-1.html
〖赞助VIP免学币下载全站资源〗:
全站资源高清无密,每天更新,vip特权了解一下:
https://www.itmsf.com/plugin.php?id=threed_vip
〖客服24小时咨询〗:
有任何问题,请点击右侧QQ咨询。
作者:
shyscool
时间:
2019-5-22 00:13
真是难得给力的资源啊!支持【IT码上发视频学习网】!
作者:
vnetoolxw
时间:
2019-5-22 04:58
激动人心,无法言表!【IT码上发视频学习网】太给力了!
作者:
stuart
时间:
2019-5-23 11:02
淡定,淡定,淡定……【IT码上发视频学习网】就是这么666!
作者:
hexargma
时间:
2019-6-28 11:29
真是难得给力的资源啊!支持【IT码上发视频学习网】!
作者:
HelloCode
时间:
2019-6-30 09:01
dsssfsdfdsfd淡定,淡定,淡定……【IT码上发视频学习网】就是这么666!
作者:
ille
时间:
2019-7-4 05:42
强烈支持IT码上发视频学习网,IT码上发视频学习网就是给力!
作者:
tianxiaguixin52
时间:
2020-2-21 20:58
激动人心,无法言表!【IT码上发视频学习网】太给力了!
作者:
panda
时间:
2020-3-23 11:00
太生气了,无法HOLD啦 >_<......为什么我才发现【IT码上发视频学习网】这样的好站!
作者:
lqq
时间:
2020-6-24 11:13
看到这样的好资源真是高兴!感谢【IT码上发视频学习网】的无私分享!
作者:
cms0315
时间:
2020-7-8 12:34
【IT码上发视频学习网】加油,我们都看好你哦,快分享更多好资源吧!
作者:
hpc19950723
时间:
2020-7-25 06:26
无回帖,不论坛,这才是人道。支持【IT码上发视频学习网】!
作者:
xulichun
时间:
2020-9-11 21:36
非常感谢楼主的分享
作者:
LyonGu
时间:
2020-11-4 16:26
看到这样的好资源真是高兴!感谢【IT码上发视频学习网】的无私分享!
作者:
mage
时间:
2020-11-8 09:00
看到这样的好资源真是高兴!感谢【IT码上发视频学习网】的无私分享!
作者:
hankuiyong
时间:
2021-9-21 08:17
真是难得给力的资源啊!支持【IT码上发视频学习网】!
作者:
lyd723
时间:
2022-7-28 09:18
淡定,淡定,淡定……【IT码上发视频学习网】就是这么666!
欢迎光临 IT码上发视频教程 (https://www.itmsf.com/)
Powered by Discuz! X3.3