IDEA版大型Spark2.4架构师系列教程第四季
返回
IDEA版大型Spark2.4架构师系列教程第四季
共17节
245人在学
课程详情
¥39.00订阅全部
01.回顾spark核心组件和逻辑关系图
02.回顾spark job执行流程-两步走
03.作业讲解-aggregateByKey实现分区索引携带
04.数据倾斜处理-重新设计key-自定义随机分区
05.spark job部署模式介绍-部署模式与集群模式组合
06.spark job cluster-standalone组合模式考察进程
07.spark yarn部署模式
08.spark yarn-client job部署模式考察
09.关闭hadoop虚拟内存和物理内存检查配置
10.配置spark.yarn.archive属性避免每次上传spark类库
11.yarn-cluser配置
12.spark standalone资源配置-daemon进程内存-worker资源配置
13.spark worker数-集群管理命令
14.standalone clisent模式下资源配置-cores-memory
15.spark job yarn client模式资源配置
16.编写spark远程调试函数sendInfo
17.task占用core配置-分布式task执行情况考察
订阅失败
IDEA版大型Spark2.4架构师系列教程第四季
...
当前章节需购买后观看
开通超级会员免费看!专家精选系列课程,满足你从入门到精通!更有问答月卡免费送,你的问题有问必答!
提交答案
购买课程
扫码完成付费,可继续学习全部课程内容
加载中...
播放页问题反馈
视频学习中有任何产品建议都可由此反
馈,我们将及时处理!
课时介绍
15.spark job yarn client模式资源配置
课程介绍
本课程讲解大规模数据处理的统一分析引擎——Spark2.4。在本课程中基于大量案例实战,深度剖析和讲解Spark2.4原理和新特性,且会包含完全从企业真实业务需求中抽取出的案例实战。除Spark2.4全体系外还包含机器学习、算法、推荐系统等。 本套大型Spark2.4架构师系列教程共计13季,本套为第四季。 配套资料-答疑专属答疑群 购买课程后加入qq群 831186576 (备注订单号后四位)
推荐课程
正在试验
后自动删除环境
关闭试验
继续试验
课程实验
本次实验时间已到期 00:00:00
课件正在飞速打包中,请耐心等待几秒钟~