成功

扫码支付

购买商品:
商品价格:

价格读取中

支付方式:
微信

请扫码进行支付

支付宝

请扫码进行支付

二维码已过期,请点击刷新

Spark基础及源码分析视频

杨千锋
CTO/CIO/技术副总裁/总工程师
十余年计算机技术领域从业经验,在中国电信、盛大游戏等多家五百强企业任职技术开发指导顾问,国内IT技术发展奠基人之一。
显示更多
课程状态: 已完结
103/103
适合人群:所有人
课程介绍
本视频面向拥有Java语言基础的同学,以Java语言为蓝本,深入浅出的讲解scala语言的语法和特征,并应用scala语言,讲解spark生态系统下的大数据开发技术。视频讲解与实例练习相结合,通过看视频也能保证知识得到充分的实践,知识掌握更牢靠。语言部分由浅入深,使得学生可以胜任项目中的开发之外,还可以读懂Spark源码,为以后研究Spark架构和自己编写架构奠定扎实的基础。
课程收益

在综合案例实现过程中,通过使用Akka通信模型实现RPC远程通信框架,这样既可以深入了解Spark的通信机制。通过学习scala语言部分的课程,学生能够具备一名中级scala开发工程师水平。在Scala语言的基础上,深入理解Spark常用算子和高级算子的使用场景,使得学生在以后的开发过程中能够灵活运用Spark核心技术。深入讲解Spark源码和Spark框架,从内到外。

课程大纲
第一章:Scala语言环境安装、Scala的基本语法
第二章:常用方法练习
第三章:面向对象、模式匹配
第四章:Actor、柯里化、隐式转换
第五章:泛型、Akka
第六章:Spark集群安装、Spark任务提交、Spark实现WordCount并上传任务
第七章:RDD的基本概念、常用算子练习
第八章: 案例练习
第九章:Spark集群启动流程和任务提交流程、案例练习
第一十章:RDD的依赖关系、Stage划分、任务的生成、自定义排序
第一十一章:Checkpoint、SparkSQL、Hive-On-Spark
第一十二章:SparkStreaming、窗口操作、Spark-On-Yarn
第一十三章:源码分析:Spark启动流程、Stage划分、任务生成、任务提交流程
内容评价0
    暂无评论
    评论成功
    评论失败