ZooKeeper+HBase分布式集群环境搭建

这篇具有很好参考价值的文章主要介绍了ZooKeeper+HBase分布式集群环境搭建。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

安装版本:hadoop-2.10.1、zookeeper-3.4.12、hbase-2.3.1

一、zookeeper集群搭建与配置

1.下载zookeeper安装包

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

2.解压移动zookeeper

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

3.修改配置文件(创建文件夹)

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

4.进入conf/

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

5.修改zoo.cfg文件

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

6.进入/usr/local/zookeeper-3.4.12/zkdatas/这个路径下创建一个文件,文件名为myid ,文件内容为1

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

7. 拷贝到两个节点上

复制到slave1

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

复制到slave2

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

查看是否复制到节点

slave1ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperslave2ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

8.在节点上执行命令

Slave1ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperSlave2ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

9.配置环境变量(三个节点都配置)

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

10. 让新添环境变量生效(三个节点都在hadoop用户下执行)

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

11.启动zookeeper服务

三台机器启动zookeeper服务;这个命令三台机器都要执行

MasterZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperSlave1ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperSlave2ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

12.查看状态

MasterZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperSlave1ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperSlave2ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

二、HBase分布式环境搭建与配置

1.下载安装包

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

2.解压HBase压缩包并移动到/usr/local/路径下(此处用的hbase-1.7.1版本作为演示)

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

3.配置环境变量

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

4.进入HBase的conf文件夹下更改文件配置

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

5.更改hbase-env.sh文件

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

6.更改hbase-site.xml文件

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

7.在regionservers中添加hostname

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

8.将配置好的hbase拷贝到slave1、slave2节点上

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

9.配置节点环境变量(三个节点都进行,版本是2.3.1不要按照下方版本写)

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper10.让环境变量生效(三个都进行)

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

11.启动Hbase(只在Master启动,启动前一定要启动zookeeper服务和hadoop)

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

12.jps查看进程

MasterZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperSlave1ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperSlave2ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

13.进入hbase shell

MasterZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperSlave1ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeperSlave2ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

14.创建表”student”

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

15.查看Hadoop状态(在浏览器网址栏输入你的ip+:50070,示例192.168.1.1:50070)

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

16.查看hbase下文件

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper

ZooKeeper+HBase分布式集群环境搭建,分布式,hbase,zookeeper文章来源地址https://www.toymoban.com/news/detail-721081.html

到了这里,关于ZooKeeper+HBase分布式集群环境搭建的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 搭建HBase分布式集群

    0. Prerequisite There are 3 VMs - hadoop3/hadoop4/hadoop5 for fully-distributed HBase cluster, the setup plan looks like: hadoop3 hadoop4 hadoop5 Hadoop hdfs NameNode:8020 DateNode:50010 JobHistoryServer:19888 DataNode:50010 SecondaryNameNode:50090 DateNode:50010 Hadoop yarn NodeManger:8040 ResourceMananger:8088 NodeManger:8040 NodeManger:8040 Zookeeper Quor

    2024年02月08日
    浏览(36)
  • 搭建HBase伪分布式集群

    1. Install zookeeper 1) download zookeeper from https://zookeeper.apache.org/releases.html#download 2) extract binary 3) configurate zoo.cfg 4) start zookeeper 5) try zookeeper Note: use following command to stop zookeeper 2. Install Hadoop 1) download Hadoop from https://hadoop.apache.org/releases.html 2) extract binary 3) configurate 4) format the filesyst

    2024年02月10日
    浏览(47)
  • HBase集群搭建记录 | 云计算[CentOS7] | HBase完全分布式集群搭建

    本系列文章索引以及一些默认好的条件在 传送门 默认使用master节点并用root用户登录终端进行操作 文章难免会有点小bug,如果有显而易见的错误,比如没有创建文件夹时就已经开始在该文件夹下操作,还请读者自行创建~ 官网下载地址 博主因为课程需要以及版本问题,下载的

    2023年04月23日
    浏览(69)
  • Zookeeper 伪分布式集群搭建详细步骤

    在同一台服务器上,部署一个 3 个 ZooKeeper 节点组成的集群,这样的集群叫伪分布式集 群,而如果集群中的 3 个节点分别部署在 3 个服务器上,那么这种集群就叫真正的分布式 集群。 这里,记录一下搭建一个 3 节点的伪分布式集群的过程,真正的分布式集群的搭建过程和 伪

    2024年02月08日
    浏览(45)
  • ZooKeeper之分布式环境搭建--仲裁模式与伪分布式环境搭建

    相关知识 为了完成本关任务,你需要掌握:1.ZooKeeper单节点安装方法,2.命令行基本操作。 ZooKeeper之仲裁模式 standlone 模式运行ZooKeeper,便于评估,开发,测试和学习。但是在实际生产中,使用ZooKeeper均以仲裁模式( quorum mode )运行, quorum mode 具有一组ZooKeeper服务器,这一组

    2024年02月05日
    浏览(48)
  • HBase 伪分布式环境搭建 - 头歌

    mkdir /app cd /opt tar -zxvf hbase-2.1.1-bin.tar.gz -C /app cd /app cd hbase-2.1.1 cd conf echo $JAVA_HOME /usr/lib/jvm/jdk1.8.0_111 vim hbase-env.sh 进入文件,找到下图中红色框框内的路径,将#去掉,把=号后面的路径改成/usr/lib/jvm/jdk1.8.0_111。注意:记得先按A,才能改。 按esc键,输入  :wq  ,回车。 vim hb

    2024年04月28日
    浏览(40)
  • 头歌大数据——HBase 伪分布式环境搭建

    第1关:HBASE伪分布式环境搭建 编程要求 好了,到你啦,你需要先按照上次实训——HBase单节点安装的方式将 HBase 安装在 /app 目录下,然后根据本关知识配置好伪分布式的 HBase ,最后点击测评即可通关。 测试说明 程序会检测你的 HBase 服务和 Hadoop 服务是否启动,以及伪分布

    2024年02月08日
    浏览(73)
  • 搭建Zookeeper集群:三台服务器,一场分布式之舞

    欢迎来到我的博客,代码的世界里,每一行都是一个故事 在分布式系统的舞台上,Zookeeper是一位不可或缺的重要角色。如何搭建一个稳定、高性能的Zookeeper集群,成为每位系统管理员和开发者的必修课。让我们一同踏上这场集群之旅,揭秘三台服务器背后的Zookeeper配置细节,

    2024年04月28日
    浏览(55)
  • Linux-一篇文章,速通Hadoop集群之伪分布式,完全分布式,高可用搭建(附zookeeper,jdk介绍与安装)。

    文章较长,附目录,此次安装是在VM虚拟环境下进行。文章第一节主要是介绍Hadoop与Hadoop生态圈并了解Hadoop三种集群的区别,第二节和大家一起下载,配置Linux三种集群以及大数据相关所需的jdk,zookeeper,只需安装配置的朋友可以直接跳到文章第二节。同时,希望我的文章能帮

    2024年03月19日
    浏览(52)
  • 【生产级实践】Docker部署配置Hadoop3.x + HBase2.x实现真正分布式集群环境

    网上找了很多资料,但能够实现Docker安装Hadoop3.X和Hbase2.X真正分布式集群的教程很零散,坑很多, 把经验做了整理, 避免趟坑。 1、机器环境 这里采用三台机器来部署分布式集群环境: 192.168.1.101 hadoop1 (docker管理节点) 192.168.1.102 hadoop2 192.168.1.103 hadoop3 2、下载Docker Hadoop的

    2024年02月02日
    浏览(49)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包