构建实时数仓的流批一体ETL工具-Streamsets

构建实时数仓的流批一体ETL工具-Streamsets
共26节 2013人在学 课程详情
  • Streamsets简介和安装
  • 本套视频的售后服务
  • Streamsets DC实战-Hello World pipeline
  • SDC实战--PostgreSql To Mysql全量同步
  • SDC实战-Postgresql To Mysql增量同步
  • SDC实战-Postgres To Mysql多表同步
  • SDC实战--CDC实战(MySQL CDC)
  • SDC实战--CDC实战(Mysql CDC+Kudu)
  • SDC实战--MySQL DDL变化监控
  • SDC实战--Postgre CDC实战(格式化CDC数据)
  • SDC实战--Postgre CDC消费位置,增量数据入Kafka
  • SDC实战--CDC实战(SQLServer CDC)
  • SDC实战-基于Impala/kudu的实时数仓数据同步
  • SDC实战-基于Hive的数据漂移同步解决方案
  • SDC实战-pipeline编排调度设计
  • SDC实战-pipeline中的表达式语言
  • SDC实战-运维操作(内存设置、用户权限)
  • SDC实战--监控预警1配置邮件发送功能
  • SDC实战-监控预警2度量规则(错误记录条数)预警
  • SDC实战-监控预警3数据规则(某字段出现小于0的值)预警
  • SDC实战-监控预警4schema改变触发预警
  • SDC实战-自定义组件开发实战
  • SDC实战-CRUD微服务实战
  • 项目案例分享1--复杂json对象数据处理及入库
  • 项目案例分享2--复杂json数组的数据处理及入库
  • 项目案例分享3--以流处理的方式实现复杂业务逻辑的增量计算

    订阅失败

    构建实时数仓的流批一体ETL工具-Streamsets
    构建实时数仓的流批一体ETL工具-Streamsets ...

    订阅列表已满,请先移出部分订阅内容。

    当前章节需购买后观看
    开通超级会员免费看!专家精选系列课程,满足你从入门到精通!更有问答月卡免费送,你的问题有问必答!
    提交答案

    购买课程

    扫码完成付费,可继续学习全部课程内容

    加载中...
    播放页问题反馈
    视频学习中有任何产品建议都可由此反
    馈,我们将及时处理!

    课时介绍

    从指定位置消费Postgre CDC数据,并将增量数据写入Kafka集群。

    课程介绍

    本课程来自一线项目(实时数仓建设)。创建实时数仓,是当前很多公司的需求,如何搭建实时数仓的架构?实时数仓需要有实时同步数据的ETL工具。在架构选型时,调研了很多ETL工具,包括Kettle、Azkaban和Streamsets,最终选择了Streamsets。如果您是数仓架构师、大数据开发工程师,本课程对您来说,非常有益。

    课程全程以实战的方式进行,每节课一到两个例子,并且会将创建实时数仓过程中的经验和教训穿插到例子讲解中,欢迎大家一起讨论实时数仓架构设计!

    推荐课程

    信息系统项目管理师自考笔记

    李明 · 857人在学

    python从0到1:期货量化交易系统(CTP实战,高频及合成K线数据

    王先生 · 22601人在学

    手把手搭建Java超市管理系统【附源码】(毕设)

    汤小洋 · 4279人在学

    Java毕设springboot外卖点餐系统 毕业设计毕设源码 使用教

    黄菊华 · 823人在学

    基于SSM酒店管理系统(毕设)

    小尼老师 · 883人在学

    java项目实战之购物商城(java毕业设计)

    Long · 5193人在学

    手把手搭建Java求职招聘系统【附源码】(毕设)

    汤小洋 · 1524人在学

    Python Django 深度学习 小程序

    钟翔 · 2385人在学

    城管局门前三包管理系统+微信小程序(vue+springboot)

    赖国荣 · 660人在学

    Vue+Uni-app(uniapp)入门与实战+赠送仿美团点餐小程序

    李杰 · 4062人在学

    正在试验
    后自动删除环境
    课程实验
    本次实验时间已到期 00:00:00
    课件正在飞速打包中,请耐心等待几秒钟~