2.4 用Apache Ambari监测Hadoop
Hadoop MapReduce性能优化
Apache Ambari项目 简化了Hadoop管理和集群监测,其主要目标是在多实例环境下简化Hadoop集群的部署与管理。
Ambari提供了一组直观、易用的监测Hadoop集群的工具,隐藏了Hadoop框架的复杂性。它通过向管理员暴露RESTful API来允许与其他系统集成。而且,Ambari依赖Ganglia和Nagios的度量结果,在需要时(如节点故障、磁盘空间不足等)使用报警系统发送电子邮件,以引起管理员的注意。除此之外,Ambari通过安装安全(基于Kerberos)的Hadoop集群,提供基于角色的用户认证、授权、审计,并与LDAP和活动目录(Active Directory)集成进行用户管理,为Hadoop安全提供支持。
如果用Apache Ambari构建Hadoop集群,也可以用它构建监测工具,比如Ganglia或者Nagios。
时间: 2024-10-31 16:49:43