当前位置:首页>开发>正文

部署30个节点的hadoop集群,用什么工具 对Hadoop监控的工具有哪些有人知道吗

2023-04-22 03:35:07 互联网 未知 开发

 部署30个节点的hadoop集群,用什么工具 对Hadoop监控的工具有哪些有人知道吗

部署30个节点的hadoop集群,用什么工具

1. 一个HDFS集群是由一个NameNode和若干个DataNode组成的。
2. 其中NameNode作为主服务器,管理文件系统的命名空间和客户端对文件系统的访问操作;集群中的DataNode管理存储的数据。
3. MapReduce框架是由一个单独运行在主节点上的JobTracker和运行在每个集群从节点的TaskTracker共同组成的。
4. 主节点负责调度构成一个作业的所有任务,这些任务分布在不同的从节点上。

对Hadoop监控的工具有哪些?有人知道吗?

当你利用Hadoop进行大数据分析和处理时,首先你需要确保配置、部署和管理集群。这个即不容易也没有什么乐趣,但却受到了开发者们的钟爱。智能职涯(bigdata-job)总结了比较常用的5种工具:Apache Ambari,Apache Mesos,Platform MapReduce,StackIQ Rocks Big Data,Zettaset Orchestrator

hadoop比较好的监控工具有哪些?

Apache Ambari
Zettaset Orchestrator
StackIQ Rocks Big Data
Platform MapReduce
Apache Mesos
给你推荐这五个,第一个比较好用,你可以试试。
来源:商业智能和数据仓库爱好者
提供。。商业智能和云计算。。。。陪训。。。有hadoop的。

最新文章

随便看看