格式化文件系统和启动和关闭Hadoop集群

这篇具有很好参考价值的文章主要介绍了格式化文件系统和启动和关闭Hadoop集群。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

一、格式化文件系统

初次启动HDFS集群时,须对主节点进行格式化处理,执行:hdfs   namenode  -format

格式化文件系统和启动和关闭Hadoop集群

格式化成功信息:

格式化文件系统和启动和关闭Hadoop集群

二:启动和关闭Hadoop集群

1.一起启动hdfs和yarn服务,执行:start-all.sh

格式化文件系统和启动和关闭Hadoop集群

1.单独启动hdfs服务,执行:start-dfs.sh

格式化文件系统和启动和关闭Hadoop集群

题外:关于jdk版本太高,启动hdfs和yarn会有警报这种,可以降低jdk版本,进行解决

具体可以参照以下这位仁兄的博客:

http://t.csdn.cn/JCSml

查看master 进程

格式化文件系统和启动和关闭Hadoop集群

查看slave1和slave2进程

格式化文件系统和启动和关闭Hadoop集群

 格式化文件系统和启动和关闭Hadoop集群

 2.单独启动yarn服务,执行:start-yarn.sh

格式化文件系统和启动和关闭Hadoop集群

 注:

启动了YARN守护进程;一个资源管理器(ResourceManager)在master虚拟机上,三个节点管理器(NodeManager)在master、slave1与slave2虚拟机上

查看master进程

 格式化文件系统和启动和关闭Hadoop集群

 查看slave1和slave2进程【只有NodeManage和DataNode】

格式化文件系统和启动和关闭Hadoop集群

 格式化文件系统和启动和关闭Hadoop集群

 文章来源地址https://www.toymoban.com/news/detail-465406.html

3.停止Hadoop集群,master上执行:stop-all.sh

注:执行stop-all.sh相当于同时执行了stop-dfs.sh和stop-yarn.sh

格式化文件系统和启动和关闭Hadoop集群

 

到了这里,关于格式化文件系统和启动和关闭Hadoop集群的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • hadoop多次格式化解决办法

    hadoop首次启动需要格式化,这时若是因为一些原由导致格式化不止一次,就会导致主点之间互相不识别,就会导致一些节点不会启动(如图是没问题的) 方法 一. 删除 配置文件core-site.xml 和hdfs-site.xml中指定目录下的文件(在如例地找    /root/wwr/hadoop-3.1.4/etc/hadoop) 1.删除

    2024年04月25日
    浏览(22)
  • Hadoop格式化时报错,已解决!

    在进行Hadoop伪分布式配置时,到了执行namenode格式化这一步时出了问题: 输入命令: 执行时出现了问题: 解决: 删除问题中的/usr/local/hadoop/tmp/dfs/name,(根据自己问题中的目录来)    然后再格式一次,这次虽然没出现问题,但还是有错误: 解决: 修改一下权限就好了,

    2024年02月09日
    浏览(27)
  • Hadoop中重新格式化NameNode的操作

    Hadoop中重新格式化NameNode的操作 在Hadoop集群中,NameNode是一个关键的组件,它负责管理文件系统的命名空间和存储元数据。有时候,我们需要重新格式化NameNode,这意味着清除现有的文件系统命名空间和元数据,并创建一个全新的NameNode实例。本文将介绍如何在大数据环境下重

    2024年02月08日
    浏览(32)
  • Hadoop HA 搭建过程中报错:namenode格式化

    问题描述: 在格式化namenode时,显示报错如下 2024-03-07 13:55:30,543 ERROR namenode.FSNamesystem: FSNamesystem initialization failed. java.io.IOException: Invalid configuration: a shared edits dir must not be specified if HA is not enabled.     at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.init(FSNamesystem.java:794)     at org

    2024年04月14日
    浏览(24)
  • 第七章 文件和数据格式化

    7.1 文件的使用 文件时存储在辅助存储器上的一组数据序列,可以包含任何数据内容。概念上,文件是数据的集合和抽象。文件包括文本文件和二进制文件两种类型。 7.1.1 文件的类型 文本文件一般由单一特定编码的字符组成,如UTF-8编码,内容容易统一展示和阅读。 二进制文

    2024年02月07日
    浏览(71)
  • VSCode打开Json 文件格式化

    在VSCode中打开JSON文件时,你可以使用以下步骤来格式化JSON并显示为多行: 使用快捷键: 在打开的JSON文件中,使用快捷键格式化文档。 Windows/Linux: Shift + Alt + F macOS: Shift + Option + F 右键菜单: 在打开的JSON文件中,右键单击,选择 \\\"Format Document\\\" 或 \\\"Format Selection\\\"。 命令面板

    2024年02月04日
    浏览(42)
  • vscode 2023格式化vue文件设置

    2024年02月10日
    浏览(40)
  • VSCode最新格式化Python文件的方法

    一、如今vscode已不能使用旧的方法来格式化文件了,原因有以下两点: 1、无法打开 “settings.json” 文件         当你使用快捷键:Ctrl + Shift + P,然后输入 “Preferences: Open Settings (JSON)”)来打开 “settings.json” 文件时,会发现【No matching results】。 这是因为新版本中,你

    2024年02月05日
    浏览(49)
  • java实现当前系统时间格式化

    运行结果:

    2024年02月13日
    浏览(31)
  • 格式化电脑重装系统怎么操作

    ​ 电脑一但中毒的电脑必须重装系统,而且需要格式化后重装系统,才能将病毒铲除,那么如何将电脑格式化后重装系统呢?能够实现电脑格式化重装系统的方法是U盘重装和光盘重装,由于部分电脑没有光驱,建议用U盘,下面小编跟大家介绍格式化电脑重装系统怎么操作。

    2024年02月10日
    浏览(28)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包