大数据全栈式运维开发

第一章： Hadoop大数据分析平台

• 01. chukwa安装配置01 41:56
• 02. Chukwa安装配置02 46:37
• 03. Hadoop1.2.1安装-01 43:25
• 04. Hadoop1.2.1安装-02 41:49
• 05. HBase安装-HBase shell常用命令 45:27
• 06. HDFS和MapReduce应用开发 43:15
• 07. Hive UDF和项目实战 45:11
• 08. HiveQL使用 48:53
• 09. Hive安装 40:23
• 10. MapReduce应用开发和HBase安装 42:53
• 11. Pig UDF编程和综合实战 45:33
• 12. Pig安装及使用 41:46
• 13. Pig实战和Zookeeper安装 42:58
• 14. Zookeeper安装使用和Chukwa安装 44:21

第二章：Hadoop2.0

• 01. Hadoop2.0安装01 41:00
• 02. Hadoop2.0安装02 40:23
• 03. Hadoop2.0安装03 45:57
• 04. Spark Standalone部署 42:17
• 05. SparkOnYarn实战 44:29
• 06. Spark独立模式HA实现 41:31
• 07. Spark服务配置及应用 45:11
• 08. Spark监控加Scala编程实例 46:03
• 09. Storm on YARN部署01 45:28
• 10. Storm on YARN部署02 41:20
• 11. Storm On YARN加Tez部署 43:45
• 12. Tez部署测试 44:42

第三章：MapReduce&HBase高阶

• 01. Hadoop Streaming实例01 41:16
• 02. Hadoop_Streaming实例02 45:07
• 03. hadoop1.0和2.0-eclipse插件编译 46:39
• 04. Hadoop2 eclipse配置测试 40:46
• 05. HBase API编程实例 41:42
• 06. HBase MapReduce编程01 42:52
• 07. HBase MapReduce编程02 42:17
• 08. HBase Thrift PHP编程01 42:25
• 09. HBase Thrift PHP编程02 43:30
• 10. HBase Thrift部署 43:57
• 11. HBase0.98.5-Hadoop2部署 48:15
• 12. MapReduce2.0实例 45:06
• 13. MapReduce高阶编程实例01 43:24
• 14. MapReduce高阶编程实例02 42:59
• 15. MapReduce高阶编程实例03 44:18
• 16. MapReduce高阶编程实例04 44:40
• 17. MapReduce高阶编程实例05 43:15
• 18. MapReduce高阶编程实例06 41:20
• 19. MapReduce高阶编程实例07 44:49
• 20. MapReduce高阶编程实例08 40:51
• 21. MapReduce高阶编程实例09 42:43
• 22. MapReduce高阶编程实例10 43:34
• 23. MapReduce高阶编程实例11 41:52

第四章：Sqoop&Flume

• 01. Flume NG复杂实例1 45:04
• 02. Flume NG复杂实例2 42:26
• 03. Flume NG复杂实例3 43:08
• 04. Flume NG实例1 42:09
• 05. Flume NG实例2 44:46
• 06. Flume NG综合实战 40:45
• 07. Flume OG部署 42:01
• 08. Flume OG配置案例-Flume NG部署 43:27
• 09. Flume OG配置案例 42:07
• 10. Sqoop import 41:11
• 11. Sqoop1 Export-Job 43:26
• 12. Sqoop1 Job-Sqoop2 43:18
• 13. Sqoop1.4.5_ Hadoop2-Hive0.13安装 45:05
• 14. Sqoop2使用 44:36

第五章：Mahout数据挖掘

• 01. Mahout fkmeans-canopy聚类实例 41:34
• 02. Mahout Kmeans聚类实例1 44:22
• 03. Mahout Kmeans聚类实例2 42:48
• 04. Mahout LDA聚类实例 47:08
• 05. Mahout Spectral聚类实例 42:13
• 06. Mahout 逻辑回归实例 41:33
• 07. Mahout安装及测试 43:11
• 08. Mahout朴素贝叶斯实例 41:02
• 09. Mahout协同过滤推荐实例 43:03
• 10. 文本挖掘项目01 43:03
• 11. 文本挖掘项目02 44:30
• 12. 文本挖掘项目03 42:14
• 13. 文本挖掘项目04 40:11
• 14. 文本挖掘项目05 44:54

第六章：Hadoop2.0节点操作

• 1. 怎样添加节点 13:57
• 2. 添加新的服务器节点 11:39
• 3. 新节点操作系统配置 16:55
• 4. 新节点Hadoop配置 17:47
• 5. 调整新节点副本数 17:34
• 6. 怎样删除节点 6:31
• 7. 删除Hadoop2.0集群节点 21:05
• 8. 测试监控删除节点后的集群 20:58

第七章：Hadoop2.0 HDFS HA部署

• 01. HDFS HA的实现方式 17:20
• 02. HDFS HA的实现步骤 21:15
• 03. HA集群环境配置 11:21
• 04. HA hdfs-site.xml参数配置 23:38
• 05. HA其他参数配置 11:20
• 06. JournalNode服务启动及初始化 19:07
• 07. HDFS HA服务启动及手工切换 22:55
• 08. 基于ZK自动切换模式的实现 10:12
• 09. HDFS HA中ZooKeeper部署 19:44
• 10. 配置HDFS HA自动切换模式 11:28
• 11. HDFS HA自动故障切换测试 19:13

第八章：Hadoop2.0 HA+Federation部署

• 1. HDFS Federation的实现方式及规划 8:38
• 2. HDFS Federation的配置步骤 13:15
• 3. 配置HDFS Federation 19:36
• 4. HDFS Federation服务启动及测试 23:06
• 5. HDFS HA加Federation实现及配置步骤 19:40
• 6. HDFS HA加Federation的配置及服务启动 22:05
• 7. HDFS HA加Federation集群故障模拟测试 19:54

第九章：Hadoop升级

• 1. Hadoop内部升级的实现 22:41
• 2. Hadoop1.0升级到2.0步骤 13:09
• 3. HDFS升级配置操作 20:50
• 4. 执行HDFS升级并测试验证 10:09
• 5. MapReduce升级 10:48

第一十章：YARN HA部署

• 1. YARN HA的实现 17:54
• 2. YARN HA的配置步骤及其相关参数 14:39
• 3. Hadoop2.0 YARN HA配置操作 23:55
• 4. YARN HA服务启动及测试 18:29
• 5. YARN HA测试及错误处理 16:50
• 6. 解决YARN HA启动错误的问题 7:14
• 7. HDFS加YARN HA故障模拟测试 17:19

第一十一章：Hadoop安全管理

• 01. Hadoop安全背景 13:33
• 02. Hadoop1.0安全问题及处理机制 20:22
• 03. Kerberos基本概念及授权认证过程 16:15
• 04. Kerberos在Hadoop中的应用 19:16
• 05. Hadoop1.0安全机制的具体实现 9:27
• 06. RPC安全之身份认证机制 19:46
• 07. RPC安全之服务访问控制机制 13:14
• 08. HDFS安全策略 8:48
• 09. Mapreduce安全策略 18:34
• 10. Hadoop上层服务的安全策略 10:32
• 11. Hadoop1.0安全机制的应用场景 13:35
• 12. Hadoop2.0安全认证机制的实现 16:56
• 13. Yarn中的各类令牌及其作用 11:07
• 14. Hadoop2.0授权机制的实现 22:16

第一十二章：Hadoop安全管理实战

• 01. 为什么选择CDH 16:06
• 02. CDH的体系架构 8:26
• 03. CDH的集群规划 9:30
• 04. CDH操作系统配置步骤 10:19
• 05. CDH集群主机名及网络配置 19:24
• 06. 操作系统yum源配置 16:59
• 07. CDH5的yum源配置 15:27
• 08. 主机间信任关系的建立 9:26
• 09. NTP时间同步服务配置 18:07
• 10. JDK安装 9:14
• 11. 安装和配置HDFS步骤 11:47
• 12. YUM安装HDFS 17:25
• 13. CDH集群环境变量配置 12:28
• 14. CDH5 HDFS核心配置 15:55
• 15. HDFS其他重要配置及服务启动 21:20
• 16. 安装和配置YARN的步骤 8:45
• 17. YARN的安装 5:28
• 18. YARN的核心参数配置 19:00
• 19. MapReduce相关参数配置 11:15
• 20. 服务启动及验证 11:15
• 21. CDH5集群测试 17:54
• 22. web HDFS的使用 13:37

第一十三章：基于kerberos的安全管理

• 01. Kerberos集群规划及配置步骤 15:25
• 02. Kerberos安装配置 18:21
• 03. Kerberos数据库创建及服务启动 10:51
• 04. Kerberos的使用及测试 14:16
• 05. Kerberos principal和keytab概念剖析 8:25
• 06. HDFS上配置Kerberos步骤 7:30
• 07. HDFS principal创建及生成keytab文件 16:02
• 08. HDFS keytab文件部署 5:59
• 09. HDFS安全参数配置 24:24
• 10. Namenode服务的安全启动 10:23
• 11. Datanode服务的安全启动 14:00
• 12. HDFS安全使用测试 9:53
• 13. YARN配置Kerberos步骤 7:17
• 14. YARN principal创建及keytab文件生成部署 13:57
• 15. YARN安全参数配置 19:16
• 16. YARN服务安全启动及测试 22:38
• 17. 自动化集群管理 11:44

第一十四章：Zookeeper&HIVE&HBASE&LDAP安全认证管理

• 01. Zookeeper配置Kerberos步骤 17:45
• 02. 通过Yum安装Zookeeper 18:29
• 03. Zookeeper Server配置Kerberos 20:15
• 04. Zookeeper Client配置kerberos 12:42
• 05. HBase相关概念深度解析 26:11
• 06. HBase配置Kerberos步骤 7:20
• 07. 通过Yum安装HBase 01 23:33
• 08. 通过Yum安装HBase 02 9:48
• 09. 为HBase配置Kerberos 18:27
• 10. HBase启动错误诊断及测试 24:07
• 11. CDH Hive架构及配置Kerberos认证步骤 12:56
• 12. 安装HIVE组件及配置PostgreSQL 23:12
• 13. Hive的基础配置 17:02
• 14. 为Hive配置Kerberos认证 17:40
• 15. Hive shell及Beeline安全访问测试 12:12
• 16. hive与hbase集成原理 14:15
• 17. hive-hbase集成安装配置 9:43
• 18. hive-hbase映射表创建 14:08
• 19. LDAP基本概念 15:51
• 20. LDAP模式设计 13:49
• 21. LDAP集成Kerberos配置步骤 9:59
• 22. LDAP安装和基础配置 21:34
• 23. LDAP集成Kerberos及数据库创建 20:48
• 24. 导入系统用户到LDAP 12:52
• 25. OpenLDAP客户端配置和使用 13:12

第一十五章：Impala大数据分析引擎

• 01. 什么是Impala 15:18
• 02. Impala架构和进程 14:16
• 03. Impala安装配置步骤 9:21
• 04. Impala安装部署 15:10
• 05. Impala配置及服务启动 11:48
• 06. Impala配置Kerberos认证 20:34
• 07. Impala启停故障处理及测试 19:27
• 08. Impala的使用 11:17
• 09. Impala-shell基本功能的使用 26:31
• 10. Impala连接查询 16:06
• 11. Impala聚合及子查询 11:35
• 12. Impala分区表的使用 13:14
• 13. Impala的优化 12:46
• 14. Impala收集统计信息及生成查询计划 17:56
• 15. HDFS缓存池在Impala中的使用 10:10

第一十六章：Oozie

• 01. 什么是oozie 14:05
• 02. Oozie安装和配置步骤 17:16
• 03. Oozie安装和基本配置 23:27
• 04. Oozie安全配置及服务启动 22:42
• 05. Oozie启动问题处理 6:13
• 06. Oozie Mapreduce作业测试 20:58
• 07. Oozie常用命令及工作流程定义 18:25
• 08. Oozie MR-hive-sqoop动作节点配置 24:13
• 09. Oozie pig-ssh-java-sw-shell动作节点配置 17:39
• 10. Oozie Coordinator作业 18:02
• 11. Coordinator动作和应用定义 18:29
• 12. Oozie Bundle应用定义 18:19
• 13. 什么是Hue 12:00
• 14. 安装配置Hue-HDFS-YARN 20:05
• 15. Hue配置Hive Kerberos Imapala和Zookeeper 18:37
• 16. Hue安装启动问题处理 19:56
• 17. Hue页面初始化及查询问题解决 19:08
• 18. Hue控制台的使用 17:58

第一十七章：Hadoop2.0授权及资源调度管理

• 01. Hadoop授权管理基础知识 19:49
• 02. 服务访问授权 19:52
• 03. 服务级授权配置实例 25:34
• 04. 队列访问控制列表 23:24
• 05. 队列访问控制配置实例 18:46
• 06. 公平调度器配置步骤 17:58
• 07. 公平调度器配置实例 21:42
• 08. 公平调度器验证 7:56
• 09. 容量调度器配置 10:25
• 10. 容量调度器配置 16:04
• 11. 容量调度配置测试验证 16:05
• 12. 基于标签的调度器 15:44

第一十八章：Hadoop压缩

• 01. hadoop压缩概念及支持的格式 17:29
• 02. hadoop常用几种压缩格式对比 21:23
• 03. 压缩格式的选择 9:39
• 04. Snappy压缩配置 10:17
• 05. Snappy-Gzip压缩测试 23:20
• 06. Hadoop LZO压缩安装配置步骤 20:36
• 07. cdh5 lzo压缩安装 20:42
• 08. lzo安装问题处理 7:03
• 09. lzo压缩配置及测试 12:57
• 10. hive配置使用lzo压缩 19:27
• 11. Hive外部表使用lzo压缩文件 17:19
• 12. Hive使用lzo压缩实例 15:12
• 13. hbase压缩配置 10:40
• 14. hbase压缩测试 15:20

第一十九章：Hadoop文件存储格式

• 1. 大数据存储需求及方式 19:31
• 2. Hadoop常用文件格式 16:48
• 3. HDFS块内三种存储方式实例 17:33
• 4. RCFile的设计和实现 18:41
• 5. ORCFile文件结构 12:35
• 6. Hive文件存储格式的选择 15:21
• 7. Hive不同文件格式数据加载测试 19:24
• 8. 多种文件格式查询存储效率测试 9:11
• 9. RCFile性能测试 16:18

第二十章：Cassandra

• 01. 调优思路 18:22
• 02. 应用程序优化 19:54
• 03. Linux系统优化 25:55
• 04. Hadoop实现机制调优 22:33
• 05. 机架感知策略实现 11:56
• 06. Hadoop参数调优综述及NameNode调优 14:45
• 07. Datanode参数调优 13:11
• 08. 集中化缓存管理 12:59
• 09. 集中缓存架构和概念 11:46
• 10. 缓存管理及缓存池命令 13:10
• 11. 缓存操作实例 18:25
• 12. 缓存参数配置 16:46
• 13. YARN调优概述 9:53
• 14. Slave和Container资源分配 10:54
• 15. 配置资源分配和进程大小属性 12:57
• 16. YARN内存监控 7:08
• 17. Reducer调度调优 12:51
• 18. Mapreduce其他关键参数调优 15:22