Hadoop集群 手动主备切换 (Active - Standby)

这篇具有很好参考价值的文章主要介绍了Hadoop集群 手动主备切换 (Active - Standby)。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

操作描述:


手动切换 node01 备用节点 StandbyNameNode 为 主节点 ActiveNameNode,node02为备用节点SNN
Hadoop集群 手动主备切换 (Active - Standby)
Hadoop集群 手动主备切换 (Active - Standby)

解决方案:


方案一:命令切换

查看节点状态

hdfs haadmin -getServiceState nn1
Hadoop集群 手动主备切换 (Active - Standby)

命令切换节点状态

到 hadoop 目录下执行:

1、将 NN2 切换为 Standby 备用节点
bin/hdfs haadmin -transitionToStandby --forcemanual nn2
2、将 NN1 切换为 Active 备用节点
bin/hdfs haadmin -transitionToActive --forcemanual nn1
Hadoop集群 手动主备切换 (Active - Standby)

效果图

Hadoop集群 手动主备切换 (Active - Standby)
Hadoop集群 手动主备切换 (Active - Standby)

方案二:利用 ZKFC 自动故障转移


思路

Hadoop 2.0x 提供了 Failover Controller(故障转移控制器)
对 NameNode 的主备切换进行总体控制,能及时检测到 NameNode 的健康状况
在主 NameNode 故障时借助 Zookeeper 实现自动的主备选举和切换

当 ZKFC 检测出 ActiveNameNode 故障时,会切换备用节点为主节点 ,并修改主备节点的状态

Standby NameNode:NN的备用节点
他和主节点 ANN 做同样的工作,但是它不会发出任何指令

操作流程

1、关闭 主节点 ANN 的 NameNode 节点

kill -9 进程号

等待一会,ZKFC 检测出 主节点 NameNode 失联后,就会进行启动备用节点为主节点

查看 node01 的节点状态,此时备用节点 已经切换为主节点 ANN

2、再将关闭的 NameNode 节点启动

单独启动NameNode节点命令

sbin/hadoop-daemon.sh start namenode

查看 node02 的节点状态,此时节点状态已经切换为备用节点


底线。。。。文章来源地址https://www.toymoban.com/news/detail-437094.html

到了这里,关于Hadoop集群 手动主备切换 (Active - Standby)的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • pg主备切换

    2024年02月07日
    浏览(47)
  • RocketMQ 主备自动切换模式部署

    目录 主备自动切换模式部署 Controller 部署​ Controller 嵌入 NameServer 部署​ Controller 独立部署​ Broker 部署​ 兼容性​ 升级注意事项​     该文档主要介绍如何部署支持自动主从切换的 RocketMQ 集群,其架构如上图所示,主要增加支持自动主从切换的 Controller 组件,其可以独立

    2024年02月14日
    浏览(42)
  • 基于zookeeper实现服务节点HA主备自动切换

    Spring Boot 主备切换可以采用数据库的主从同步、Zookeeper选举、Redis Sentinel等技术实现高可用。 其中,数据库的主从同步可以通过配置数据库的主从复制来实现。在主节点出现故障时,从节点可以自动接管并成为新的主节点。这种方式实现简单,但需要手动配置主从复制。 Zo

    2024年01月16日
    浏览(36)
  • 5. Hadoop集群操作

    5.1.1 格式化文件系统 如果集群是第一次启动,需要在hadoop102节点格式化NameNode。 注意:格式化NameNode,会产生新的集群id,导致NameNode和DataNode的集群id不一致,集群找不到已往数据。如果集群在运行过程中报错,需要重新格式化NameNode的话,一定要先停止namenode和datanode进程,

    2024年02月04日
    浏览(26)
  • docker搭建Postgresql主备集群

    docker-compose.yaml配置文件如下: 将Postgresql主库的数据文件保存到~/pg_data目录下并映射到容器内部,然后启动容器: 在主库数据目录下执行如下命令: 同时修改postgresql.conf文件的如下内容: 修改完成后重启主库容器: 先使用pg_basebackup命令备份主库的数据,请注意pg_basebackup的版

    2024年02月22日
    浏览(34)
  • 使用css实现点击切换active效果

    不使用js,纯css实现点击切换active样式 html css 样式 css

    2024年02月12日
    浏览(39)
  • 达梦数据库主备集群

    按实际业务需求,选择合适的服务器,准备  3 台服务器 ,一台主库服务器,一台备库服务器,一台监视器服务器,服务器参数建议如下: 硬件 要求 物理内存 =16 GB 交换区 Swap 空间=物理内存 /tmp大小 1000 MB 网络 物理机器需要 4 个网卡,2 个 public 网卡做 band,2 个 private 网卡

    2024年01月16日
    浏览(40)
  • MGR 主备集群实现异步连接故障转移

    MySQL 8.0.22 开始 ,支持异步连接故障切换机制,在现有主从复制连接失败后,自动建立到新主的异步复制连接。 MySQL 8.0.23 开始 ,异步连接故障切换机制还支持组复制拓扑,通过自动监视组成员身份的更改并区分主节点和从节点,在组复制主节点故障选出新主节点后,自动建

    2024年02月16日
    浏览(39)
  • Java 操作 Hadoop 集群之 HDFS 的应用案例详解

    注意:本文内容基于 Hadoop 集群搭建完成基础上: Linux 系统 CentOS7 上搭建 Hadoop HDFS集群详细步骤 本文的内容是基于下面前提: Hadoop 集群搭建完成并能正常启动和访问 Idea 和 Maven 分别安装完成 需要有 JavaSE 基础和熟悉操作hadoop 的 hdfs dfs 命令 Maven 及 idea 中 Maven 相关配置 本地

    2024年04月16日
    浏览(43)
  • 七、Hadoop系统应用之搭建Hadoop高可用集群(超详细步骤指导操作,WIN10,VMware Workstation 15.5 PRO,CentOS-6.7)

    Hadoop集群搭建前安装准备参考: 一、Hadoop系统应用之安装准备(一)(超详细步骤指导操作,WIN10,VMware Workstation 15.5 PRO,CentOS-6.7) 一、Hadoop系统应用之安装准备(二)(超详细步骤指导操作,WIN10,VMware Workstation 15.5 PRO,CentOS-6.7) Hadoop集群搭建过程参考: 二、Hadoop系统应

    2024年02月02日
    浏览(53)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包