整套大数据学习资料(视频+笔记)百度网盘无门槛下载:http://www.edu360.cn/news/content?id=3377

10.2监控

监控是系统管理的重要内容。在本节中,我们概述Hadoop的监控工具,看 看它们如何与外部监控系统相结合。

监控的目标在于检测集群在何时未提供所期望的服务。主守护进程是最需 要监控的,包括主namenode、辅助namenode和jobtracker。我们可以预期 少数datanode和tasktracker会出现故障,特别是在大型集群中。因此,需 要为集群预留额外的容量,即使有一小部分节点宕机,也不会影响整个系 统的运作。

除了以下即将介绍的工具之外,管理员还可以定期运行一些测试作业来检 査集群的健康状况。

能够监控Hadoop的工具(或方法)有很多,但限于篇幅,本书无法一一介


绍。例如,Chukwa®是一个数据集合,也是基于HDFSMapReduce的监 控系统,它在挖掘日志数据和发现大规模趋势方面有很大的优势。

转载请注明:全栈大数据 » 10.2监控

喜欢 (0)or分享 (0)
发表我的评论
取消评论

表情

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址