【高阶实战】顶级运营商大数据实时分析项目

【高阶实战】顶级运营商大数据实时分析项目
共54节 571人在学 课程详情
  • Spark开发工程师课程介绍

    • 【高级】Spark开发工程师课程介绍
  • 项目需求分析与架构设计

    • 项目业务详细介绍(一)
    • 项目业务详细介绍(二)
    • 项目技术选型与架构设计
    • 1、2、3期项目工程架构(一)
    • 1、2、3期项目工程架构(二)
    • 手机客户端到服务端通信过程与服务质量监控
  • 大数据采集集群设计与要求

    • 大数据采集集群设计与要求
    • 采集系统如何应用数据峰值
  • 大数据测试集群与线上集群资源规划

    • 测试集群与线上集群资源规划部署
  • 华为手机客户端数据上报服务端【实战】

    • 手机客户端数据上报服务端应用开发(一)
    • 手机客户端数据上报服务端应用开发(二)
    • 数据上报本地测试
    • 数据上报服务端测试1
    • 数据上报服务端测试2
    • 用户隐私数据保护
  • Flume高可用集群采集华为手机业务数据【实战】

    • Flume最简数据采集
    • Flume TailDirSource断点续传
    • Flume TailDirSource源码解读
    • Flume TailDirSource源码bug修改
    • Flume TailDirSource 文件回滚验证源码bug修改
    • Flume高可用分布式集群构建
    • Flume集群接入手机客户端上报数据
  • Kafka分布式集群实现华为手机数据交换【实战】

    • Kafka集群可用性测试
    • Flume与Kafka整合
    • Kafka数据分区优化理论支撑
    • Kafka分区优化源码开发
    • Flume与Kafka分区优化测试
  • HBase分布式数据库建模【实战】

    • HBase数据库建模
  • Spark Streaming实时项目工程开发【实战】

    • 相关集群参数集中管理
    • 生产环境中优雅停止Spark Streaming作业
    • 从HBase获取Kafka offset消费起始位置
    • Spark Streaming消费kafka数据
    • 获取当前DStream每个批次的offset
    • Spark对原始数据做ETL
    • Spark大数据分析华为手机业务
    • 业务数据入库HBase
    • 生产环境如何维护kafka offset
    • 项目优化之kryo序列化
    • 项目优化之Kafka分区限流
    • HBase如何处理高并发流
  • 项目工程本地测试与线上部署【实战】

    • 项目所有业务建表
    • 项目本地测试jar包冲突解决
    • 项目本地测试跑通
    • 项目打包及上传服务器
    • Spark ON YARN安装部署
    • YARN生产环境调度器配置与使用
    • 项目运行脚本开发及下线、线上配置切换
    • 生产环境中项目提交YARN运行
    • Spark Streaming结合业务代码执行详解
  • web用户行为可视化项目接口开发【实战】

    • web可视化项目介绍
    • web用户行为接口开发与查询
    • web可视化项目总结
    • 【高级】Spark开发工程师课程总结

    订阅失败

    【高阶实战】顶级运营商大数据实时分析项目
    【高阶实战】顶级运营商大数据实时分析项目 ...

    订阅列表已满,请先移出部分订阅内容。

    当前章节需购买后观看
    开通超级会员免费看!专家精选系列课程,满足你从入门到精通!更有问答月卡免费送,你的问题有问必答!
    提交答案

    购买课程

    扫码完成付费,可继续学习全部课程内容

    加载中...
    播放页问题反馈
    视频学习中有任何产品建议都可由此反
    馈,我们将及时处理!

    课时介绍

    Flume TailDirSource源码bug修改

    课程介绍

    Spark开发工程师课程旨在帮助同学们收获一份有含金量、能写在简历上的项目经验,课程无死角讲解项目每个环节。课程内容涉及项目业务介绍、技术选型与架构设计、项目的架构演进、手机端到服务端数据流程、日志采集设计与要求、日志采集拓扑结构、线上和本地集群资源规划、项目全流程开发、项目总结、项目面试21问。项目内容比较丰满,零基础的同学可以从基础学到项目,有基础的同学可以直接选择项目学习。
    推荐课程

    信息系统项目管理师自考笔记

    李明 · 916人在学

    python从0到1:期货量化交易系统(CTP实战,高频及合成K线数据

    王先生 · 22823人在学

    手把手搭建Java超市管理系统【附源码】(毕设)

    汤小洋 · 4294人在学

    Java毕设springboot外卖点餐系统 毕业设计毕设源码 使用教

    黄菊华 · 838人在学

    基于SSM酒店管理系统(毕设)

    小尼老师 · 900人在学

    java项目实战之购物商城(java毕业设计)

    Long · 5203人在学

    手把手搭建Java求职招聘系统【附源码】(毕设)

    汤小洋 · 1532人在学

    Python Django 深度学习 小程序

    钟翔 · 2409人在学

    城管局门前三包管理系统+微信小程序(vue+springboot)

    赖国荣 · 681人在学

    Vue+Uni-app(uniapp)入门与实战+赠送仿美团点餐小程序

    李杰 · 4077人在学

    正在试验
    后自动删除环境
    课程实验
    本次实验时间已到期 00:00:00
    课件正在飞速打包中,请耐心等待几秒钟~