大数据分析案例:6天IDEA下友盟数据平台实战项目

大数据分析案例:6天IDEA下友盟数据平台实战项目
共72节 435人在学 课程详情
课程目录
讨论留言
  • 大数据分析案例第一章

    • 01.业务模型介绍
    • 02.业务术语
    • 03.日志实体类设计-日志聚合体
    • 04.DictUtil工具-缓存设置
    • 05.LogUtil-内省生成log对象
    • 06.LogUtil-处理设备号-生成时间
    • 07.LogUtil-简单日志和复杂日志的代码改造
    • 08.初始化收集日志web模块
    • 09.抽象出公共模块-安装到maven仓库-引入公共模块
    • 10.配置web模块-运行
    • 11.调试web模块-公共模块集成问题-注解问题
    • 12.colllog-web模块的client地址信息的处理
    • 13.colllog-web模块的更新地址
    • 14.client与服务器时间对齐问题
  • 大数据分析案例第二章

    • 01.centos下tomcat安装
    • 02.centos下tomcat安装过程
    • 03.导出web模块为war包部署到tomcat中
    • 04.nginx简介-win7下nginx的安装
    • 05.nginx在centos下的安装与验证
    • 06.nginx进程停止处理
    • 07.nginx配置win7反向代理服务器-验证
    • 08.nginxPost提交方式支持配置-body信息提取
    • 09.安装nginx与lua插件集成版的openresty解决nginx问题
    • 10.centos安装openresty
    • 11.centos配置openresty
    • 12.手机端程序修改clientTime为client_time头以符合openresty的标准
    • 13.手机端程序发送地址,考察openresty的是否捕捉真实ip
    • 14.准备kafka集群创建kafka主题
    • 15.配置flume收集日志文件
    • 16.滚动nginx日志脚本
    • 17.配置centos crontab调度作业
    • 18.配置flume收集数据kafka到hdfs
  • 大数据分析案例第三章

    • 02.hive5张日志子表的准备工作1
    • 03.代码生成ddl语句,创建5张日志子表
    • 04.hive UDTF
    • 05.hive日志叉分函数使用UDTF实现
    • 06.hive日志叉分函数startuplog切分
    • 07.hive ObjectInspector
    • 08.hive分叉函数超类实现
    • 09.从日志聚合体叉分出启动日志数据函数实现
    • 10.日志叉分函数抽象复用处理
    • 01.hive数据库表创建以及加载数据到hive表中
  • 大数据分析案例第四章

    • 02.修改ForkBaseLogUDTF函数解决字段重复的问题
    • 03.上传udfjar包到hdfs再注册udf函数,解决类找不到问题
    • 04.编写叉分所有日志的脚本-格式清楚-测试
    • 05.自定义日期格式化函数
    • 06.修改fork_all_logs.sql脚本,使用自定日期格式化函数
    • 07.编写load数据到hive原生表供调度使用
    • 08.启动所有组件,实现数据流转
    • 09.编写日志叉分脚本-测试
    • 10.azkabanweb服务器和执行安装与配置-测试
    • 01.创建分区表-动态不严格分区-parquet格式
  • 大数据分析案例第五章

    • 02.分析app新增用户数的查询实现
    • 03.时间起始时刻函数实现工具类
    • 04.起始函数编写
    • 05.函数名称处理-防控制问题
    • 06.azkaban单独测试单个job执行
    • 07.配置azkaban调度运行
    • 08.实现日新查询结果入表
    • 09.编写azkaban job实现日新的统计-表生成
    • 10.编写sqoop脚本导出hive统计数据到mysql-配置azkaban调度测试
    • 01.azkaban job编写-工作原理
  • 大数据分析案例第六章

    • 02.ssm实现umeng可视化程序
    • 03.ssm实现集成ui部分完成数据展示-使用echart实现可视化
    • 04.ssm7天内日新用户数
    • 05.azkaban noop操作-flow生成法则
    • 06.改造脚本,指定load数据的具体时间值
    • 07.运行生成n天前数据
    • 08.查询N天日新程序
    • 10.flume自定义exec源-避免重复收集-防止丢数据
    • 09.flume限速拦截器
    • 01.关于linux时间-时区-azkaban的时区设置
播放页问题反馈
视频学习中有任何产品建议都可由此反
馈,我们将及时处理!

课时介绍

01.业务模型介绍

课程介绍

本章节为大数据架构师课程的综合案例课程,大数据生态体系庞大,通过本章节综合案例的讲授,你可以轻松的掌握综合案例技术,掌握本节内容后可以胜任企业级的开发,形成良好的大数据企业开发思维。 这套综合案例绝对三脚猫功夫,真正用心打磨出来,帮助更多的大数据技术爱好者少走弯路。 购买课程后加入qq群 831186576 (备注订单号后四位)
推荐课程

信息系统项目管理师自考笔记

李明 · 710人在学

python从0到1:期货量化交易系统(CTP实战,高频及合成K线数据

王先生 · 22070人在学

手把手搭建Java超市管理系统【附源码】(毕设)

汤小洋 · 4198人在学

Java毕设springboot外卖点餐系统 毕业设计毕设源码 使用教

黄菊华 · 786人在学

基于SSM酒店管理系统(毕设)

小尼老师 · 837人在学

java项目实战之购物商城(java毕业设计)

Long · 5151人在学

手把手搭建Java求职招聘系统【附源码】(毕设)

汤小洋 · 1504人在学

Python Django 深度学习 小程序

钟翔 · 2315人在学

城管局门前三包管理系统+微信小程序(vue+springboot)

赖国荣 · 597人在学

Vue+Uni-app(uniapp)入门与实战+赠送仿美团点餐小程序

李杰 · 3979人在学

正在试验
后自动删除环境
课程实验
本次实验时间已到期 00:00:00

    订阅失败

    大数据分析案例:6天IDEA下友盟数据平台实战项目
    大数据分析案例:6天IDEA下友盟数据平台实战项目 ...

    订阅列表已满,请先移出部分订阅内容。

    当前章节需购买后观看
    开通超级会员免费看!专家精选系列课程,满足你从入门到精通!更有问答月卡免费送,你的问题有问必答!
    提交答案

    购买课程

    扫码完成付费,可继续学习全部课程内容

    加载中...
    课件正在飞速打包中,请耐心等待几秒钟~