使用Python访问Zookeeper获取数据

这篇具有很好参考价值的文章主要介绍了使用Python访问Zookeeper获取数据。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

Python如何获取zookeeper中的数据,本文将简单介绍Python访问zookeeper中设置了权限的目录信息。


1、环境准备
1.1 安装Python环境

1)安装依赖包

# yum install sqlite-devel readline-devel bzip2-devel libffi-devel gcc openssl-devel

2)下载安装包并解压:

# tar xzf Python-2.7.5.tgz

3)进入解压后的文件夹,并进行编译安装:

# cd Python-2.7.5
# ./configure
# make install

4)安装完成后验证:

# python
Python 2.7.5 (default, Sep 26 2023, 14:48:56) 
[GCC 4.8.5 20150623 (Red Hat 4.8.5-44)] on linux2
Type "help", "copyright", "credits" or "license" for more information.
1.2 安装Zookeeper环境

1)解压安装包

# tar -xzvf zookeeper-3.4.12.tar.gz

2)修改配置文件

tickTime=2000
initLimit=10
syncLimit=5
dataDir=/usr/local/zookeeper/data
clientPort=2181
maxClientCnxns=60
server.1=192.168.112.121:2888:3888
  • tickTime: 这个时间是作为Zookeeper服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是每个tickTime时间就会发送一个心跳
  • initLimit:这个配置项是用来配置Zookeeper接受客户端(这里所说的客户端不是用户连接Zookeeper服务器的客户端,而是Zookeeper服务器集群中连接到Leader的Follower服务器)初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过5个心跳的时间(也就是tickTime)长度后Zookeeper服务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是5*2000=10秒
  • syncLimit:这个配置项标识Leader与Follower之间发送消息,请求和应答时间长度,最长不能超过多少个tickTime的时间长度,总的时间长度就是5*2000=10秒
  • clientPort:这个端口就是客户端连接Zookeeper服务器的端口,Zookeeper会监听这个端口,接受客户端的访问请求
  • server.1 这个1是服务器的标识也可以是其他的数字, 表示这个是第几号服务器,用来标识服务器,这个标识要写到快照目录下面myid文件里
  • 192.168.112.121为集群里的IP地址,第一个端口是master和slave之间的通信端口,默认是2888,第二个端口是leader选举的端口,集群刚启动的时候选举或者leader挂掉之后进行新的选举的端口默认是3888

3)在data目录创建zookeeper所需的目录

# pwd	
/usr/local/zookeeper/data
# mkdir zookeeper

4)在~/data/zookeeper目录下创建myid文件,里面的内容为数字,用于标识主机,如果这个文件没有的话,zookeeper是没法启动的

# echo "1" > myid
# cat myid
1

5)启动zookeeper

./bin/zkServer.sh start

6)监控端口已启用

# netstat -an|grep 2181
tcp6       0      0 :::2181                 :::*                    LISTEN
1.3 Zookeeper中添加授权用户

1)连接zookeeper并创建目录

# ./bin/zkCli.sh --127.0.0.1:2181
[zk: localhost:2181(CONNECTED) 1] create /test "123"
Created /test
#查看数据
[zk: localhost:2181(CONNECTED) 5] get /test
123
cZxid = 0x2
ctime = Tue Sep 26 11:13:13 CST 2023
mZxid = 0x2
mtime = Tue Sep 26 11:13:13 CST 2023
pZxid = 0x2
cversion = 0
dataVersion = 0
aclVersion = 0
ephemeralOwner = 0x0
dataLength = 3
numChildren = 0

2)设置访问权限及授权用户访问

[zk: localhost:2181(CONNECTED) 15] addauth digest testuser:testuser 
[zk: localhost:2181(CONNECTED) 16] setAcl /test auth:testuser:testuser:cdrwa
cZxid = 0x2
ctime = Tue Sep 26 11:13:13 CST 2023
mZxid = 0x2
mtime = Tue Sep 26 11:13:13 CST 2023
pZxid = 0x2
cversion = 0
dataVersion = 0
aclVersion = 1
ephemeralOwner = 0x0
dataLength = 3
numChildren = 0
[zk: localhost:2181(CONNECTED) 17] getAcl /test                             
'digest,'testuser:lgLFo8g8g30ow2QI0iDoLGPlXQo=
: cdrwa

3)设置完成后再重新登录提示没有权限

[zk: localhost:2181(CONNECTED) 1] ls /test
Authentication is not valid : /test
2、使用Python访问Zookeeper获取数据

使用Python访问zookeeper数据,需要使用kazoo库,安装KazooClient

>>> from kazoo.client import KazooClient
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
ImportError: No module named kazoo.client

下载kazoo包并安装

# cd kazoo-2.9.0
# python setup.py install
2.1 无权限限制访问

使用Python访问zookeeper服务,获得zookeeper中存储的数据,具体实现如下:

from kazoo.client import KazooClient  
  
# 创建Zookeeper客户端  
client = KazooClient(hosts='localhost:2181')  
  
# 连接Zookeeper  
client.start()  
  
# 获取指定节点数据 
data, stat = client.get('/test01')  
  
# 打印节点数据  
print(data)  
  
# 关闭Zookeeper连接  
client.stop()

如果访问的是授权管理的目录,直接访问会提示NoAuthError

Traceback (most recent call last):
  File "get_zk_noauth1.py", line 10, in <module>
    data, stat = client.get('/test')  
  File "/usr/local/lib/python2.7/site-packages/kazoo-2.9.0-py2.7.egg/kazoo/client.py", line 1165, in get
    return self.get_async(path, watch=watch).get()
  File "/usr/local/lib/python2.7/site-packages/kazoo-2.9.0-py2.7.egg/kazoo/handlers/utils.py", line 86, in get
    raise self._exception
kazoo.exceptions.NoAuthError
2.2 授权访问

授权访问,在zookeeper连接的时候添加auth_data配置用户和密码,如下所示:

from kazoo.client import KazooClient  

zk_ip='127.0.0.1'
zk_port='2181'
zk_user='testuser'
zk_pwd='testuser'
  
# 创建Zookeeper客户端  
client = KazooClient(hosts=zk_ip+':'+zk_port,auth_data=[("digest",zk_user+':'+zk_pwd)])  
  
# 连接Zookeeper  
client.start()  
  
# 获取指定节点数据  
data, stat = client.get('/test')  
  
# 打印节点数据  
print(data)  
  
# 关闭Zookeeper连接  
client.stop()
client.close()

运行脚本,正常返回结果文章来源地址https://www.toymoban.com/news/detail-727317.html

到了这里,关于使用Python访问Zookeeper获取数据的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • zookeeper未鉴权访问漏洞处理

    1.进入到Zookeeper的安装目录的bin文件夹下执行以下命令: 2.回车后查看节点路径 3.记录下所有2中显示的所有节点,例如会有dubbo和bpme等节点 用以下命令创建用户,用户名和密码可以自行修改(admin为用户名,admin123为密码) 4.添加授权(红色中的内容为用户名密码必须是和第

    2023年04月16日
    浏览(26)
  • 使用ZooKeeper实现数据分片机制及其集群容错能力

    作者:禅与计算机程序设计艺术 在分布式数据库中,数据分片是指将一个大的表按照业务规则或某种规则拆分成多个小的子表或者分区,然后分别存储到不同的物理服务器上,提高查询效率、扩展性等,而每个小的子表又可以称之为“分片”,这个过程就是数据分片。一般情

    2024年02月05日
    浏览(53)
  • 基于spring boot框架访问zookeeper

    本地部署zookeeper: 进入zookeeper-3.3.6/conf目录下,将zoo_sample.cfg文件改名为zoo.cfg,再用文本编辑器打开这个文件,修改如下红框位置的内容,改成本地一个可以访问的已有目录: 打开命令行窗口,进入zookeeper-3.3.6/bin目录,windows下执行zkServer.cmd status,mac和linux下执行./zkServer.sh

    2024年02月14日
    浏览(44)
  • 【李老师云计算】HBase+Zookeeper部署及Maven访问

    本篇博客内容大部分参考了涛哥的博客,在此基础上进行了整合、补充以及融合了我自己的操作,向学长表示敬意! 本次操作,为什么说是操作不是实验呢,因为这个不算课内的作业,而是必须要完成的额外任务,是在完成了【李老师云计算】实验一:Hadoop伪分布式集群部署

    2023年04月18日
    浏览(34)
  • windows下 java使用zookeeper案例,神策数据java面试题

    public class BaseZookeeper implements Watcher { private ZooKeeper zookeeper; /** * 超时时间 */ private static final int SESSION_TIME_OUT = 2000; private CountDownLatch countDownLatch = new CountDownLatch(1); @Override public void process(WatchedEvent event) { if (event.getState() == KeeperState.SyncConnected) { System.out.println(“Watch received event”

    2024年04月16日
    浏览(36)
  • 【李老师云计算】HBase+Zookeeper部署及Maven访问(HBase集群实验)

    本篇博客内容大部分参考了涛哥的博客,在此基础上进行了整合、补充以及融合了我自己的操作,向学长表示敬意! 本次操作,为什么说是操作不是实验呢,因为这个不算课内的作业,而是必须要完成的额外任务,是在完成了【李老师云计算】实验一:Hadoop伪分布式集群部署

    2023年04月20日
    浏览(41)
  • 【Zookeeper】使用Curator操作Zookeeper

    Curator 是 Apache ZooKeeper 的Java客户端库。 Zookeeper现有常见的Java API如:原生JavaAPI、Curator、ZkClient等。 创建连接 创建节点 不指定数据 指定数据 设置节点类型 节点可以分为四大类: PERSISTENT 持久化节点 EPHEMERAL 临时节点,只在当前会话有效 PERSISTENT_SEQUENTIAL 持久化顺序节点 EPH

    2024年02月07日
    浏览(40)
  • 【Zookeeper专题】Zookeeper特性与节点数据类型详解

    对于我们这些JavaCoder来说,市面上有各式各样,功能相似的中间件供我们使用。我想大家应该都清楚,要认识一个中间件,最好的方式应该是从它的创造背景开始说起。 ( PS:Zookeeper主要用来解决分布式集群中应用系统的一致性问题 ) ( PS:个人认为ZK最重要,或者说最有

    2024年02月06日
    浏览(45)
  • zookeeper第一课-Zookeeper特性与节点数据类型详解

    ZooKeeper 是一个开源的分布式协调框架,是Apache Hadoop 的一个子项目,主要用来解决分布式集群中应用系统的一致性问题。 Zookeeper 的设计目标是将那些复杂且容易出错的分布式一致性服务封装起来,构成一个高效可靠的原语集,并以一系列简单易用的接口提供给用户使用。

    2024年02月13日
    浏览(49)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包