导航
课程首页
  • PM-Summit 全球产品经理大会云会员
  • SDCon 全球软件研发技术大会云会员
  • ML-Summit 全球机器学习技术大会云会员
  • C++性能优化高端培训
  • AI全栈开发实战营
精品课 极客时间

C 知道

登录
会员中心
消息
历史
创作中心
创作
学习中心
成为讲师

IDEA版大型Spark2.4架构师系列教程第四季 01.回顾spark核心组件和逻辑关系图

IDEA版大型Spark2.4架构师系列教程第四季
共17节 242人在学 课程详情
课程目录
讨论留言
  • 01.回顾spark核心组件和逻辑关系图
  • 02.回顾spark job执行流程-两步走
  • 03.作业讲解-aggregateByKey实现分区索引携带
  • 04.数据倾斜处理-重新设计key-自定义随机分区
  • 05.spark job部署模式介绍-部署模式与集群模式组合
  • 06.spark job cluster-standalone组合模式考察进程
  • 07.spark yarn部署模式
  • 08.spark yarn-client job部署模式考察
  • 09.关闭hadoop虚拟内存和物理内存检查配置
  • 10.配置spark.yarn.archive属性避免每次上传spark类库
  • 11.yarn-cluser配置
  • 12.spark standalone资源配置-daemon进程内存-worker资源配置
  • 13.spark worker数-集群管理命令
  • 14.standalone clisent模式下资源配置-cores-memory
  • 15.spark job yarn client模式资源配置
  • 16.编写spark远程调试函数sendInfo
  • 17.task占用core配置-分布式task执行情况考察
回复
切换为未回复评论
切换为时间正序
请发表友善的回复…
发表回复
发表回复
按下Enter换行,Ctrl+Enter发表内容
编辑
预览
    轻敲空格完成输入
    • 显示为
    • 卡片
    • 标题
    • 链接

    反馈

    播放页问题反馈
    视频学习中有任何产品建议都可由此反
    馈,我们将及时处理!

    课时介绍

    01.回顾spark核心组件和逻辑关系图

    课程介绍

    本课程讲解大规模数据处理的统一分析引擎——Spark2.4。在本课程中基于大量案例实战,深度剖析和讲解Spark2.4原理和新特性,且会包含完全从企业真实业务需求中抽取出的案例实战。除Spark2.4全体系外还包含机器学习、算法、推荐系统等。 本套大型Spark2.4架构师系列教程共计13季,本套为第四季。 配套资料-答疑专属答疑群 购买课程后加入qq群 831186576 (备注订单号后四位)
    推荐课程

    信息系统项目管理师自考笔记

    李明 · 717人在学

    python从0到1:期货量化交易系统(CTP实战,高频及合成K线数据

    王先生 · 22082人在学

    手把手搭建Java超市管理系统【附源码】(毕设)

    汤小洋 · 4200人在学

    Java毕设springboot外卖点餐系统 毕业设计毕设源码 使用教

    黄菊华 · 787人在学

    基于SSM酒店管理系统(毕设)

    小尼老师 · 838人在学

    java项目实战之购物商城(java毕业设计)

    Long · 5152人在学

    手把手搭建Java求职招聘系统【附源码】(毕设)

    汤小洋 · 1506人在学

    Python Django 深度学习 小程序

    钟翔 · 2318人在学

    城管局门前三包管理系统+微信小程序(vue+springboot)

    赖国荣 · 598人在学

    Vue+Uni-app(uniapp)入门与实战+赠送仿美团点餐小程序

    李杰 · 3982人在学

    正在试验
    后自动删除环境
    课程实验
    本次实验时间已到期 00:00:00

      订阅失败

      IDEA版大型Spark2.4架构师系列教程第四季
      IDEA版大型Spark2.4架构师系列教程第四季 ...

      订阅列表已满,请先移出部分订阅内容。

      当前章节需购买后观看
      开通超级会员免费看!专家精选系列课程,满足你从入门到精通!更有问答月卡免费送,你的问题有问必答!
      提交答案

      购买课程

      扫码完成付费,可继续学习全部课程内容

      加载中...
      课件正在飞速打包中,请耐心等待几秒钟~
      首页
      博客
      下载
      学习
      社区
      C知道
      GitCode
      InsCodeAI
      技术会议
      会员中心
      创作中心
      联系我们
      工作时间: 8:30 - 22:00
      客服电话: 400-660-0108
      kefu@csdn.net在线客服
      • 关于我们
      • 招贤纳士
      • 商务合作
      • 寻求报道
      • 京ICP备19004658号
      • 经营性网站备案信息
      • 公安备案号11010502030143
      • 营业执照
      • 北京互联网违法和不良信息举报中心
      • 家长监护
      • 中国互联网举报中心
      • 网络110报警服务
      • Chrome商店下载
      • 账号管理规范
      • 版权与免责声明
      • 版权申诉
      • 出版物许可证
      • ©1999-2024北京创新乐知网络技术有限公司

      视频问题反馈

      提交遇到的问题我们会尽快解决的 ~