Hadoop集群启动后利用Web界面管理HDFS

7月前作者：MI_farmer 分类：Toy博客阅读(40) 违法举报

这篇具有很好参考价值的文章主要介绍了Hadoop集群启动后利用Web界面管理HDFS。希望对大家有所帮助。如果存在错误或未考虑完全的地方，请大家不吝赐教，您也可以点击"举报违法"按钮提交疑问。

Hadoop集群启动后，可以通过自带的浏览器Web界面查看HDFS集群的状态信息，访问IP为NameNode所在服务器的IP地址，hadoop版本为3.0以前访问端口默认为9870，hadoop版本为3.0以后访问端口默认为50070。（下面测试版本为Hadoop3.0以后的）

一、利用ifconfig命令查看NameNode所在服务器的IP地址

Hadoop集群启动后利用Web界面管理HDFS

例如我的NameNode所在服务器的IP地址为192.168.107.131

二、利用虚拟机自带的浏览器打开192.168.107.131：50070

在浏览器地址栏中输入192.168.107.131：50070或者输入master:50070即可打开HDFS的web界面。点击Overview就可以查看文件系统的基本信息，例如系统启动时间，Hadoop版本号，Hadoop源码编译时间，集群ID等等。在Summary一栏中，我们可以看见HDFS磁盘存储空间，已使用空间，剩余空间等信息。

Hadoop集群启动后利用Web界面管理HDFS 文章来源地址https://www.toymoban.com/news/detail-512438.html

到了这里，关于Hadoop集群启动后利用Web界面管理HDFS的文章就介绍完了。如果您还想了解更多内容，请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章，希望大家以后多多支持TOY模板网！

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：如若内容造成侵权/违法违规/事实不符，请点击违法举报进行投诉反馈，一经查实，立即删除！

分享到：

领支付宝红包赞助服务器费用

hadoop集群配置与启动（三）

1 集群部署规划 NameNode 和 SecondaryNameNode 不要安装在同一台服务器。（它们两个都需要耗内存，分开减少集群的压力） ResourceManager 也很消耗内存，不要和 NameNode、SecondaryNameNode 配置在同一台机器上 2配置文件说明 Hadoop 配置文件分两类：默认配置文件和自定义配置文件，只有

2024年02月03日
浏览(29)
任务6：启动Hadoop集群并测试

任务描述知识点：掌握Hadoop集群的启动重点： Hadoop集群的格式化流程 Hadoop集群的启动流程内容：格式化Hadoop集群启动测试Hadoop集群任务指导启动Hadoop集群并测试，过程如下：初始化HDFS；在master服务器启动Hadoop集群；使用jps命令查看相应的守护进程是否正常启

2024年01月19日
浏览(31)
Linux修改hadoop配置文件及启动hadoop集群详细步骤

目录一、配置Hadoop环境 1.查看Hadoop解压位置 2.配置环境变量 3.编辑环境变量 4.重启环境变量 5.查看Hadoop版本，查看成功就表示Hadoop安装成功了二、修改配置文件 1.检查三台虚拟机： 2.切换到配置文件目录 3.修改 hadoop-env.sh 文件 4.修改 core-site.xml 文件 5.修改 mapred-site.xml 文件

2024年02月03日
浏览(41)
【Hadoop】执行start-dfs.sh启动hadoop集群时，datenode没有启动怎么办

执行start-dfs.sh后，datenode没有启动，很大一部分原因是因为在第一次格式化dfs后又重新执行了格式化命令（hdfs namenode -format)，这时主节点namenode的clusterID会重新生成，而从节点datanode的clusterID 保持不变。在主节点也就是namenode那个节点上的hdfs-site.xml文件下找到这两个文件路径

2024年02月04日
浏览(39)
【大数据】HADOOP-Yarn集群界面UI指标项详解（建议收藏哦）

集群监控信息指标详解 Apps Submitted：已提交的应用 Apps Completed：已完成的应用 Apps Running：正在运行的应用 Containers Running：正在运行的容器 Memory Total：集群总内存，大小等于所有的NodeManager管理的内存之和 Memory Used：已使用内存 VCores Total：集群 CPU 总核数, 等于所有的NodeMana

2023年04月09日
浏览(26)
格式化文件系统和启动和关闭Hadoop集群

初次启动HDFS集群时，须对主节点进行格式化处理，执行：hdfs namenode -format 格式化成功信息： 1. 一起启动hdfs和yarn服务，执行：start-all.sh 1. 单独启动hdfs服务，执行：start-dfs.sh 题外：关于jdk版本太高，启动hdfs和yarn会有警报这种，可以降低jdk版本,进行解决具体可以参照

2024年02月07日
浏览(35)
【非常重要】Hadoop成功启动的验证与集群的基本应用

master上 slave上 master:9870 这是Hadoop自带的web监测软件，提供丰富的系统状态信息自己理解：9870端口用来查看Hadoop中的hdfs运行状态 master:18088 监测yarn的运行状况自己理解：18088端口用来查看Hadoop中的yarn运行状态这个程序是验证hadoop最重要的一环，虽然在1和2的验证中都通过，

2023年04月09日
浏览(28)
Hadoop集群当中主节点的NameNode进程启动不成功

原因：是因为多次格式化NameNode的原因，每次格式化NameNode的时候，hadoop集群就会产生一个新的集群ID，导致了NameNode和DataNode的集群ID不一致，所以导致运行start-all.sh后，hadoop的NameNode进程启动不起来。现在作者附上两种解决方法，我是使用了第二种方法成功的。在hadoop集群

2024年02月08日
浏览(34)
Hadoop集群启动后命令JPS没有DataNode或者NameNode

问题原因 1）需要检查core-site.xml 和 hdfs-site.xml这俩文件，配置没错的话再看第二条 2）可能已经执行格式化NameNode后，但是格式之前并没有停止之前的进程并删除相关数据。解决方案（记得你的集群删除前需要停止，每个副本都要进行一次下面操作） 1）删除dfs文件夹里的文

2024年02月04日
浏览(41)
【Hadoop】关于Hadoop集群HDFS启动问题：DataNode启动报错ERROR: Cannot set priority of namenode process

出了问题第一步一定要先看日志！看日志！看日志！ DataNode日志文件在Hadoop目录下的logs文件夹以下列举两种问题的解决方法： 1.最常见的就是对NameNode进行了多次格式化操作，格式化NameNode，会产生新的集群id，导致NameNode和DataNode的集群id不一致，集群找不到已往数据。如果

2024年02月06日
浏览(40)