hadoop自动化运维工具Ambari应用实践

Apache Ambari是一种基于Web的运维工具，支持Apache Hadoop集群的自动化部署、管理和监控。Ambari目前已支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeeper、Sqoop和Hcatalog等。 Ambari使用Ganglia收集度量指标，用Nagios支持系统报警，当需要引起管理员的关注时（比如，节点停机或磁盘剩余空间不足等问题），系统将向其发送邮件。 本课程主要讲解Ambari工具的使用，主要涉及Ambari的安装部署、在Ambari下自动化部署一套hadoop3.x集群、在Ambari下扩容hadoop集群节点、在Ambari下添加Hive、hbase、spark等服务，以及如何实现hadoop集群中服务的自动化管理，还介绍了Ambari下如何进行故障告警和故障通知功能。 本课程采用Centos7.x版本，Ambari版本为Ambari2.7.x，hadoop版本为HDP3.1(hadoop3.x)。 1、Ambari的工作原理与架构 2、安装与部署Ambari 3、通过Ambari部署一个Hadoop3.x集群 4、通过Ambari扩容hadoop集群节点 5、通过Ambari在hadoop集群中新增hive/hbase/tez服务组件 6、通过Ambari在hadoop中新增spark计算引擎 7、通过Ambari管理hadoop集群中的各种组件和服务 8、通过Ambari修改hadoop集群各个组件配置参数 9、在Ambari平台配置监控告警、并设置通知策略