【Ceph集群应用】Ceph块存储之RBD接口详解

这篇具有很好参考价值的文章主要介绍了【Ceph集群应用】Ceph块存储之RBD接口详解。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。


接上文基于ceph-deploy部署Ceph集群详解

1.创建Ceph块存储系统RBD接口

(1)创建一个名为rbd-demo的专门用于RBD的存储池

ceph osd pool create rbd-demo 64 64

(2)将存储池转换为RBD模式

ceph osd pool application enable rbd-demo rbd

(3)初始化存储池

rbd pool init -p rbd-demo			# -p 等同于 --pool

(4)创建镜像

rbd create -p rbd-demo --image rbd-demo1.img --size 10G

###可简写为
rbd create rbd-demo/rbd-demo2.img --size 10G

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

(5)镜像管理

查看存储池下存在哪些镜像

rbd ls -l -p rbd-demo

查看镜像的详细信息

rbd info -p rbd-demo --image rbd-demo1.img

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

修改镜像大小

rbd resize -p rbd-demo --image rbd-demo1.img --size 20G

rbd info -p rbd-demo --image rbd-demo1.img

#使用 resize 调整镜像大小,一般建议只增不减,如果是减少的话需要加选项 --allow-shrink
rbd resize -p rbd-demo --image rbd-demo1.img --size 5G --allow-shrink

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux
【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

1.1 删除镜像

直接删除镜像

rbd rm -p rbd-demo --image rbd-demo2.img
rbd remove rbd-demo/rbd-demo2.img

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

推荐使用trash命令,这个命令删除是将镜像移动至回收站,如果想找回还可以恢复

rbd trash move rbd-demo/rbd-demo1.img

rbd ls -l -p rbd-demo

rbd trash list -p rbd-demo
acc62785c8bb rbd-demo1.img

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

1.2 还原镜像

rbd trash restore rbd-demo/acc62785c8bb

rbd ls -l -p rbd-demo

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

(6)Linux客户端使用

客户端使用RBD有两种方式:

  • 通过内核模块KRBD将镜像映射为系统本地块设备,通常设置文件一般为:/dev/rbd*
  • 另一种是通过librbd接口,通常KVM虚拟机使用这种接口

本例主要是使用Linux客户端挂载RBD镜像为本地磁盘使用。开始之前需要在所需要客户端节点上面安装ceph-common软件包,因为客户端需要调用rbd命令将RBD镜像映射到本地当作一块普通硬盘使用。并还需要把ceph.conf配置文件和授权keyring文件复制到对应的节点

在管理节点创建并授权一个用户可访问指定的 RBD 存储池

#示例,指定用户标识为client.osd-mount,对另对OSD有所有的权限,对Mon有只读的权限
ceph auth get-or-create client.osd-mount osd "allow * pool=rbd-demo" mon "allow r" > /etc/ceph/ceph.client.osd-mount.keyring

修改RBD镜像特性,CentOS7默认情况下只支持layering和striping特性,需要将其它的特性关闭

rbd feature disable rbd-demo/rbd-demo1.img object-map,fast-diff,deep-flatten

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

将用户的keyring文件和ceph.conf文件发送到客户端的/etc/ceph目录下

cd /etc/ceph
scp ceph.client.osd-mount.keyring ceph.conf root@client:/etc/ceph

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

linux客户端操作

#安装ceph-common软件包
yum install -y ceph-common

执行客户端映射

cd /etc/ceph
rbd map rbd-demo/rbd-demo1.img --keyring /etc/ceph/ceph.client.osd-mount.keyring --user osd-mount

查看映射

rbd showmapped
rbd device list

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

断开映射

rbd unmap rbd-demo/rbd-demo1.img

格式化并挂载

mkfs.xfs /dev/rbd0

mkdir -p /data/bb
mount /dev/rbd0 /data/bb

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

1.3 在线扩容

###在管理节点调整镜像的大小
rbd resize rbd-demo/rbd-demo1.img --size 30G

在线刷新/dev/rbd0设备文件

xfs_growfs /dev/rbd0		#刷新xfs文件系统容量
resize2fs /dev/rbd0			#刷新ext4类型文件系统容量

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

(7)快照管理

对rb 镜像进行快照,可以保留镜像的状态历史,另外还可以利用快照的分层技术,通过将快照克隆为新的镜像使用

在客户端写入文件:

echo 1111 > /data/bb/11.txt
echo 2222 > /data/bb/22.txt
echo 3333 > /data/bb/33.txt

在管理节点对镜像创建快照

rbd snap create --pool rbd-demo --image rbd-demo1.img --snap demo1_snap1

###可简写为
rbd snap create rbd-demo/rbd-demo1.img@demo1_snap1

列出指定镜像所有快照

rbd snap list rbd-demo/rbd-demo1.img

用json格式输出

rbd snap list rbd-demo/rbd-demo1.img --format json --pretty-format

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

1.4 回滚镜像到指定位置

在回滚快照之前,需要将镜像取消镜像的映射,然后再回滚

在客户端操作

rm -rf /data/bb/*
umount /data/bb
rbd unmap rbd-demo/rbd-demo1.img

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

在管理节点操作,回滚镜像到快照的位置

rbd snap rollback rbd-demo/rbd-demo1.img@demo1_snap1

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

在客户端重新映射并挂载

rbd map rbd-demo/rbd-demo1.img --keyring /etc/ceph/ceph.client.osd-mount.keyring --user osd-mount
mount /dev/rbd0 /data/bb
ls /data/bb				#发现数据还原回来了

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

限制镜像可创建快照数

rbd snap limit set rbd-demo/rbd-demo1.img --limit 3

解除限制

rbd snap limit clear rbd-demo/rbd-demo1.img

1.5 删除快照

删除指定快照

rbd snap rm rbd-demo/rbd-demo1.img@demo1_snap1

删除所有快照

rbd snap purge rbd-demo/rbd-demo1.img

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

1.6 快照分层

快照分层支持用快照的克隆生成新镜像,这种镜像与直接创建的镜像几乎完全一样,支持镜像的所有操作。唯一不同的是克隆镜像引用了一个只读的上游快照,而且此快照必须要设置保护模式

快照克隆

(1)将上游快照设置为保护模式

rbd snap create rbd-demo/rbd-demo1.img@demo1_snap666

rbd snap protect rbd-demo/rbd-demo1.img@demo1_snap666
rbd snap list rbd-demo/rbd-demo1.img     #列出指定镜像的所有快照

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

(2)克隆快照为新的镜像

rbd clone rbd-demo/rbd-demo1.img@demo1_snap666 --dest rbd-demo/rbd-demo666.img

 rbd ls -l -p rbd-demo     #查看存储池下存在那些镜像   

(3)命令查看克隆完成后快照的子镜像

rbd children rbd-demo/rbd-demo1.img@demo1_snap666

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux
【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

1.7 快照展平

通常情况下,通过快照克隆而得到的镜像会保留对父快照的引用,这时候不可以删除该父快照,否则会有影响。

rbd snap rm rbd-demo/rbd-demo1.img@demo1_snap666
#报错snapshot 'demo1_snap666' is protected from removal

如果要删除快照但想保留其子镜像,必须先展平其子镜像,展平的时间取决于镜像的大小
(1)展平子镜像

rbd flatten rbd-demo/rbd-demo666.img

(2)取消快照保护

rbd snap unprotect rbd-demo/rbd-demo1.img@demo1_snap666

(3)删除快照

rbd snap rm rbd-demo/rbd-demo1.img@demo1_snap666
rbd ls -l -p rbd-demo			#在删除掉快照后,查看子镜像依然存在

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

1.8 镜像的导出导入

  • 导出镜像
rbd export rbd-demo/rbd-demo1.img  /opt/rbd-demo1.img

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

  • 导入镜像
#卸载客户端挂载,并取消映射
umount /data/bb
rbd unmap rbd-demo/rbd-demo1.img
  • 清除镜像下的所有快照,并删除镜像
rbd snap purge rbd-demo/rbd-demo1.img   purge:清除
rbd rm rbd-demo/rbd-demo1.img

rbd ls -l -p rbd-demo

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux

  • 导入镜像
rbd import /opt/rbd-demo1.img  rbd-demo/rbd-demo1.img
rbd ls -l -p rbd-demo

【Ceph集群应用】Ceph块存储之RBD接口详解,Linux,运维,云计算,ceph,云计算,运维,linux文章来源地址https://www.toymoban.com/news/detail-594679.html

到了这里,关于【Ceph集群应用】Ceph块存储之RBD接口详解的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 【分布式技术】分布式存储ceph之RBD块存储部署

    目录 创建 Ceph 块存储系统 RBD 接口 服务端操作 1、创建一个名为 rbd-demo 的专门用于 RBD 的存储池 2、将存储池转换为 RBD 模式 3、初始化存储池 4、创建镜像 5、在管理节点创建并授权一个用户可访问指定的 RBD 存储池 6、修改RBD镜像特性,CentOS7默认情况下只支持layering和stripin

    2024年01月18日
    浏览(75)
  • k8s如何使用ceph rbd块存储(静态供给、存储类动态供给)

    环境: centos 7.9 k8s 1.22.17 ceph集群 首先明确一点,rbd块存储只能独占挂载,换句话说就是只能一个客户端挂载使用,不管这个客户端是真实的服务器也好还是k8s的pod也好,一句话,rbd块存储只能一个客户端挂载使用,这就决定了k8s中pv的读写模式不能也不支持ReadWriteMany。 基于

    2024年02月09日
    浏览(41)
  • 【Ceph】Ceph集群应用详解

    接上文基于ceph-deploy部署Ceph集群详解 Pool是Ceph中 存储Object对象抽象概念 。我们可以将其理解为 Ceph存储上划分的逻辑分区 ,Pool由多个PG组成;而 PG通过CRUSH算法映射到不同的OSD上 ;同时Pool可以设置副本size大小,默认副本数量为3。 Ceph客户端向monitor请求集群的状态,并向P

    2024年02月16日
    浏览(41)
  • 【Linux】分布式存储系统 Ceph应用

    提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档 1、创建一个名为 rbd-demo 的专门用于 RBD 的存储池 2、将存储池转换为 RBD 模式 3、初始化存储池 4、创建镜像 5、镜像管理 6、Linux客户端使用 7、快照管理 8、镜像的导出导入 1、对象存储概念 对象存储(

    2024年02月16日
    浏览(53)
  • ceph--RBD的使用

    Ceph 可以同时提供对象存储 RADOSGW、块存储 RBD、文件系统存储 Ceph FS,RBD 即 RADOS Block Device 的简称,RBD 块存储是常用的存储类型之一,RBD 块设备类似磁盘 可以被挂载,RBD 块设备具有快照、多副本、克隆和一致性等特性,数据以条带化的方式 存储在 Ceph 集群的多个 OSD 中。 客户

    2024年02月15日
    浏览(40)
  • Ceph原理、部署、存储集群、块存储及对象存储centos7.5

    目录 ​编辑 一、Ceph概述  1、基础知识 1. 分布式存储定义 2. 常用的分布式文件系统 3. Ceph定义 4. Ceph组件  二、实验环境准备 1、实验拓扑图 2、配置yum源  3、配置SSH无密码连接 4、NTP时间同步 1.NTP服务器配置  2.NTP客户端配置 3.准备存储硬盘 三、部署环境 1、安装部署软件

    2023年04月20日
    浏览(81)
  • Ceph分布式文件系统——文件系统MDS接口 块存储RDB接口 对象存储RGW接口

    服务端操作 1)在管理节点创建 mds 服务 2)查看各个节点的 mds 服务 3)创建存储池,启用 ceph 文件系统 ceph 文件系统至少需要两个 rados 池,一个用于存储数据,一个用于存储元数据。此时数据池就类似于文件系统的共享目录。 创建 cephfs,命令格式:ceph fs new FS_NAME CEPHFS_ME

    2024年02月16日
    浏览(42)
  • 【分布式技术】分布式存储ceph之RGW接口

    目录 1、对象存储概念  2、创建 RGW 接口 //在管理节点创建一个 RGW 守护进程 #创建成功后默认情况下会自动创建一系列用于 RGW 的存储池  #默认情况下 RGW 监听 7480 号端口  //开启 http+https ,更改监听端口 #更改监听端口 ​          //创建 RadosGW 账户 客户端测试 OSD 故障模拟

    2024年01月19日
    浏览(62)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包