我的私人笔记(安装hbase)

这篇具有很好参考价值的文章主要介绍了我的私人笔记(安装hbase)。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

在安装前需要安装好JDK、Hadoop以及Zookeeper,JDK版本为1.8、Hadoop版本为2.7.4以及Zookeeper的版本为3.4.10。

4.1.下载

下载地址:Index of /dist/hbase

本次学习版本为: hbase-1.2.1-bin.tar.gz

4.2.安装步骤

  1. 上传安装包至hadoop01节点的/opt/software目录下

  2. 解压hbase-1.2.1-bin.tar.gz 至/opt/servers目录下,并将改名为hbase

//解压hbase-1.2.1-bin.tar.gz

tar -xzvf /opt/software/hbase-1.2.1-bin.tar.gz -C /opt/servers/

//改名

cd /opt/servers/

mv hbase-1.2.1 hbase

  1. 配置环境变量

//编辑配置文件

vi /etc/profile

//在PATH变量前添加一行

export HBASE_HOME=/opt/servers/hbase

//在PATH中后添加$HBASE_HOME/bin

export PATH=$PATH:$HBASE_HOME/bin

//更新配置文件

source /etc/profile

  1. 验证

hbase version

4.3.配置hbase

4.3.1.local/standalone模式
  1. 创建本地目录

mkdir -p /home/centos/hbase/zk

  1. 配置hbase-env.sh文件

[hbase/conf/hbase-env.sh]

export JAVA_HOME=/opt/servers/jdk

  1. 配置hbase本地目录

[hbase/conf/hbase-site.xml]

<property>

<name>hbase.rootdir</name>

<value>file:///home/centos/hbase</value>

</property>

  1. 配置zk本地数据存放目录

[hbase/conf/hbase-site.xml]

<property>

<name>hbase.zookeeper.property.dataDir</name>

<value>/home/centos/hbase/zk</value>

</property>

4.3.2.伪分布式
  1. 配置hbase的hbase.cluster.distributed.

//[hbase-site.xml]

<property>

<name>hbase.cluster.distributed</name>

<value>true</value>

</property>

<property>

<name>hbase.rootdir</name>

<value>hdfs://master:8020/hbase</value>

</property>

  1. 启动hbase

start-hbase.sh

  1. 检查进程

jps

----------------------

SecondaryNameNode

HMaster //master服务器

NameNode

HRegionServer //区域区域服务器

Jps

HQuorumPeer //zk

ResourceManager

4.3.3.完全分布式
  1. 配置前需删除HDFS中已经存在的"hdfs://hadoop01:8020/hbase"目录(伪分布式使用过改目录,没有请跳过)。

hdfs dfs -rm -r /hbase

  1. 检查集群中所有节点的时间,保持误差不超过30秒。(因我们是克隆的虚拟机,此步骤可跳过)

ntpdate -u cn.pool.ntp.org

  1. 配置hbase-site.xml文件,更多配置请参照:HBase-site.xml 常见重要配置参数

<!--指定hbase在HDFS上的存储路径-->

<property>

<name>hbase.rootdir</name>

<value>hdfs://hadoop01:9000/hbase</value>

</property>

<!--指定hbase是分布式的-->

<property>

<name>hbase.cluster.distributed</name>

<value>true</value>

</property>

<!--指定zk的地址,多个用","分隔-->

<property>

<name>hbase.zookeeper.quorum</name>

<value>hadoop01:2181,hadoop02:2181,hadoop03:2181</value>

</property>

  1. 配置hbase-env.sh文件

//在文件最后加上

#配置jdk的环境变量

export JAVA_HOME=/opt/servers/jdk

#配置hbase使用外部的zookeeper

export HBASE_MANAGES_ZK=false

  1. 配置regionservers文件

hadoop02

hadoop03

  1. 修改backup-masters配置文件

vi backup-masters

hadoop02

  1. 分发hbase

//分别分发/opt/moudle/hbase到其他节点

scp -r /opt/servers/hbase/ hadoop02:/opt/servers/

scp -r /opt/servers/hbase/ hadoop03:/opt/servers/

  1. 分发配置文件

scp -r /etc/profile hadoop02:/etc/profile

scp -r /etc/profile hadoop03:/etc/profile

  1. 重启系统使/etc/profile生效(或者逐个机器更新)

  2. 启动hbase

//启动hadoop

start-all.sh

//启动zookeeper

start-zk.sh

//启动hbase

start-hbase.sh

11.分别查看各个节点的进程

12.进入HBase Shell查看HBase的运行状态

hbase shell

status

2 servers表示当前有2个HRegionServer正在正常运行。

13.可以通过web端查看HBase运行状态,浏览器输入https://hadoop01:16010

14.最后可以使用exit退出HBase Shell

15.停止集群时先停止HBase(先启后停)

{

export JAVA_HOME=/opt/servers/jdk

export HADOOP_HOME=/opt/servers/hadoop

export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

export ZOOKEEPER_HOME=/opt/servers/zookeeper

export PATH=$PATH:$ZOOKEEPER_HOME/bin

export HIVE_HOME=/opt/servers/hive

export PATH=$PATH:$HIVE_HOME/bin

export HBASE_HOME=/opt/servers/hbase

export PATH=$PATH:$HBASE_HOME/bin

}文章来源地址https://www.toymoban.com/news/detail-693083.html

到了这里,关于我的私人笔记(安装hbase)的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • Hadoop安装配置HBase

    1、文件准备 http://archive.apache.org/dist/hbase/1.3.1/下载hbase-1.3.1-bin.tar.gz并上传到虚拟机/root目录下。 2、安装          切换目录 [root@hadoop00 ~]# cd /usr/local 新建文件夹 [root@hadoop00 local]# mkdir hbase 解压文件 [root@hadoop00 local]# tar zxvf /root/hbase-1.3.1-bin.tar.gz -C /usr/local/hbase 3、环境变量

    2024年01月24日
    浏览(35)
  • 虚拟机安装hadoop,hbase(单机伪集群模式)

    工作中遇到了大数据方面的一些技术栈,没有退路可言,只能去学习掌握它,就像当初做爬虫一样(虽然很简单),在数据爆发的现在,传统的数据库mysql,oracle显然在处理大数据量级的数据时显得力不从心,所以有些特定的业务需要引进能够处理大数据量的数据库,hadoop提

    2024年02月04日
    浏览(28)
  • Hadoop安装Hbase启动失败报错解决方法

    先进入hbase文件目录里看日志文件看看报什么错再具体解决: vim /opt/module/hbase-1.3.3/logs/hbase-root-master-hadoop-single.log  1.报错org.apache.hadoop.security.AccessControlException: Permission denied: user异常解决方法 1、第一种 在hdfs的配置文件中,将dfs.permissions修改为False(不推荐) 2、第二种 执行

    2024年02月07日
    浏览(35)
  • 【hadoop】hbase的安装部署以及相关操作(图文详解)

    ​ HBase是一种基于列存储的分布式数据库系统,它能够快速地存储和处理大规模数据。与传统的关系型数据库不同,HBase采用了分布式的架构,能够实现数据的高可靠性、高可扩展性和高性能。在实际应用中,正确地安装和部署HBase集群是非常重要的。 在安装hbase之前,需要虚

    2024年02月04日
    浏览(29)
  • 【Hadoop】创建Hadoop集群(3个节点)—— 安装部署一个3个节点构成的hbase集群

    前言 此实验搭建3个虚拟节点,一个mater,一个slave1,一个slave2 集群简介 HADOOP集群具体来说包含两个集群:HDFS集群和YARN集群,两者逻辑上分离,但在物理上常在一起。 HDFS集群负责海量数据的存储,集群中的角色主要有: NameNode、DataNode、SecondaryNode YARN集群负责海量数据运算

    2024年02月08日
    浏览(34)
  • Hadoop(05) HBase2.5.5安装和编程实践指南

    HBase是一个基于Apache Hadoop的 分布式、可扩展、面向列的NoSQL数据库系统 。它被设计用于处理大规模数据集,并提供快速的读写访问性能。 以下是HBase的一些关键特点和概念: 列存储结构:HBase使用列存储结构,意味着数据被组织成行和列的形式。每个表可以有灵活的列族定义

    2024年02月03日
    浏览(29)
  • Linux安装Zookeeper、Hadoop、Hive、Hbase全家桶系列

    目录 Linux安装配置Zookeeper Linux安装配置Hadoop Linux安装Hbase 新建文件夹 下载到指定文件夹 官网 Apache ZooKeeper 解压到指定文件 查看 进入目录 创建日志/数据文件夹 复制配置文件 使用vim进入zoo.cfg 修改为如下:  记录一下zookeeper的路径然后 刷新资源 运行 查看状态 创建文件夹加

    2024年02月14日
    浏览(30)
  • 大数据之Hadoop分布式数据仓库HBase

    HBase 是一个构建在 Hadoop 文件系统之上的面向列的数据库管理系统。 要想明白为什么产生 HBase,就需要先了解一下 Hadoop 存在的限制?Hadoop 可以通过 HDFS 来存储结构化、半结构甚至非结构化的数据,它是传统数据库的补充,是海量数据存储的最佳方法,它针对大文件的存储,

    2024年02月02日
    浏览(39)
  • Hadoop环境下HBase的安装部署与操作指南(图文详解)

    本文详细介绍了在Hadoop集群环境下HBase的安装部署步骤及相关操作,包括准备环节、版本兼容性检查、IP及IP映射修改、上传并解压安装包、配置HBASE_HOME等关键步骤,图文结合,为初学者和开发者提供一站式解决方案。

    2024年04月27日
    浏览(32)
  • 基于 HBase & Phoenix 构建实时数仓(1)—— Hadoop HA 安装部署

    目录 一、主机规划 二、环境准备 1. 启动 NTP 时钟同步 2. 修改 hosts 文件 3. 配置所有主机间 ssh 免密 4. 修改用户可打开文件数与进程数(可选) 三、安装 JDK 四、安装部署 Zookeeper 集群 1. 解压、配置环境变量 2. 创建配置文件 3. 创建新的空 ZooKeeper 数据目录和事务日志目录 4

    2024年03月10日
    浏览(37)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包