百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

(十六) 60s搞懂 : Zookeeper 的详细安装,使用及注意事项

itomcoil 2025-04-01 19:01 29 浏览

前面一篇文章阳仔给大家结束了Zookeeper的一些基本概念,那么这一篇文章,阳仔将给大家介绍一下Zookeeper 的详细安装和使用步骤以及注意事项;

什么是 Zookeeper?

一个开源的分布式协调服务,用于管理分布式应用程序中的配置信息、命名、提供分布式同步以及组服务等功能。它为分布式应用提供了一种简单、高效且可靠的协调机制,能够帮助解决分布式系统中的一些常见问题,如数据一致性、服务注册与发现等。

使用 Zookeeper 的详细步骤

1. 安装 Zookeeper

下载

下载安装包 :可以从 Apache 官方网站下载 Zookeeper 的稳定版本,

例如使用命令`wget
https://dlcdn.apache.org/zookeeper/zookeeper-3.9.2/apache-zookeeper-3.9.2-bin.tar.gz`下载指定版本。

解压安装包 :使用`tar -zxvf
apache-zookeeper-3.9.2-bin.tar.gz`命令解压安装包。

移动安装目录 :将解压后的目录移动到指定目录,如`/usr/local/`,使用命令`mv apache-zookeeper-3.9.2 /usr/local/`。

2. 配置 Zookeeper

配置

2.1.修改配置文件: Zookeeper 在启动时会找zoo.cfg这个文件作为默认配置文件。

进入 Zookeeper 的`conf`目录,通常会有一个示例配置文件`zoo_sample.cfg`,可以将其复制并重命名为`zoo.cfg`,然后根据实际需求进行修改。

以下是一些常见的配置参数 :

  • tickTime:Zookeeper 使用的基本时间单位(毫秒),用于执行心跳检测等,例如设置为`2000`。
  • dataDir:存储内存中数据快照的路径,如`/tmp/zookeeper/data`。
  • clientPort:监听客户端连接的端口,可根据需要设置,如`9009`。
  • initLimit:Leader 允许 Follower 连接并进行初始同步的时间,以`tickTime`为单位,例如设置为`10`。
  • syncLimit:Leader 允许 Follower 在同步过程中滞后的时间,以`tickTime`为单位,例如设置为`5`。
  • clientPort: 客户端端口号, 根据服务设置,例如 : 设置为2181.
tickTime=2000
initLimit=10
syncLimit=5
# 数据保存地址
dataDir=/tmp/zookeeper/data

# 客户端访问端口(zookeeper-1.novalocal、zookeeper-2.novalocal、zookeeper-3.novalocal修改为实际zookeeper主机的ip或域名)
server.1=zookeeper-1.novalocal:2888:3881
server.2=zookeeper-2.novalocal:2888:3882
server.3=zookeeper-3.novalocal:2888:3883

在集群模式下,还需要配置`server.id=host:port:port`,其中`id`是服务器的编号,`host`是服务器的 IP 地址,第一个`port`是集群内部通信端口,第二个`port`是 Leader 选举端口,例如`server.1=192.168.1.1:2888:3888`。

注意:集群模式下,如果三个zookeeper服务都在同一台服务器上,这里要保证地址的唯一性,注意IP地址和端口号不要互相冲突,IP相同,端口一定不能相同,以免影响程序的正确执行。

2.2 创建数据目录:根据配置文件中的`dataDir`参数,创建相应的数据存储目录,如`mkdir -p /opt/zookeeper/data`。 如果是集群模式的话,每个服务器都需要执行该命令

3. 启动 Zookeeper

查看状态

3.1启动服务:在 Zookeeper 的`bin`目录下,执行`./zkServer.sh start`命令启动服务。

集群模式,需要每个节点都需要执行;

查看服务状态 :可以使用`./zkServer.sh status`命令查看服务的运行状态,确认是否启动成功。

# 启动服务
bash /var/lib/zookeeper-3.4.6/bin/zkServer.sh  start

# 查看服务状态
bash /var/lib/zookeeper-3.4.6/bin/zkServer.sh  status

# 测试客户端连接
bash /var/lib/zookeeper-3.4.6/bin/zkCli.sh

出现Mode:follower或Mode:leader则zookeeper集群部署成功,服务启动正常。

4. 使用 Zookeeper 客户端进行操作

使用流程

连接客户端 :在 Zookeeper 的`bin`目录下,使用命令`./zkCli.sh -server 127.0.0.1:2181`连接到 Zookeeper 服务器,进入命令行界面。

基本操作 :

  • 创建 ZNode :使用`create /my_node "my_data"`命令创建一个名为`/my_node`的节点,并写入数据`my_data`。
  • 读取 ZNode:使用`get /my_node`命令读取`/my_node`节点的数据。
  • 修改 ZNode :使用`set /my_node "new_data"`命令将`/my_node`节点的数据修改为`new_data`。
  • 删除 ZNode:使用`delete /my_node`命令删除`/my_node`节点。

监控节点变化:Zookeeper 提供了 Watcher 机制,允许客户端对某个 ZNode 设置 Watcher,当节点发生变化时客户端会收到通知。例如,使用`get /my_node true`命令设置对`/my_node`节点的监控,当节点数据变化或被删除时,客户端将收到事件通知。

5. 实现分布式锁

创建顺序节点 :每个客户端尝试创建一个顺序节点,Zookeeper 会为每个客户端分配一个唯一的顺序号。

获取锁 :拥有最小序号的客户端获得锁。

释放锁 :当客户端释放锁时,删除该节点,其他客户端监控到变化,尝试获取锁。以下是一个简单的 Java 示例代码:

import org.apache.zookeeper.*;
import java.util.Collections;
import java.util.List;

public class DistributedLock {
    private ZooKeeper zk;
    private String lockBasePath = "/locks";
    private String lockName;
    private String currentLock;

    public DistributedLock(ZooKeeper zk, String lockName) {
        this.zk = zk;
        this.lockName = lockName;
    }

    public void acquireLock() throws Exception {
        String lockPath = lockBasePath + "/" + lockName;
        // 创建顺序节点
        currentLock = zk.create(lockPath, new byte[0], ZooDefs.Ids.OPEN_ACL_UNSAFE, CreateMode.EPHEMERAL_SEQUENTIAL);
        // 获取所有子节点并排序
        List lockNodes = zk.getChildren(lockBasePath, false);
        Collections.sort(lockNodes);
        if (currentLock.endswith(lockNodes.get(0))) {
            // 获取锁
            System.out.println("Acquired lock: " + currentLock);
        } else {
            // 等待锁释放
            String previousLock = lockNodes.get(lockNodes.indexOf(currentLock) - 1);
            zk.exists(lockBasePath + "/" + previousLock, watchedEvent -> {
                if (watchedEvent.getType() == Watcher.Event.EventType.NodeDeleted) {
                    try {
                        acquireLock();
                    } catch (Exception e) {
                        e.printStackTrace();
                    }
                }
            });
        }
    }

    public void releaseLock() throws Exception {
        // 释放锁
        zk.delete(currentLock, -1);
        System.out.println("Released lock: " + currentLock);
    }
}

注意:

数据量限制 :Zookeeper 设计为轻量级协调服务,ZNode 不能存储过大的数据,通常不超过 1MB。

高可用配置 :为了提高服务的高可用性,建议 Zookeeper 部署奇数个节点,且至少 3 个节点,以保证出现故障时系统仍能正常运行。

网络隔离处理:在分布式系统中,Zookeeper 对网络分区的处理需要特别注意,避免出现脑裂等问题。

我是阳仔,喜欢的朋友,欢迎点赞,收藏,转发和评论,感谢各位朋友的支持!!!

相关推荐

MariaDB开窗函数(开窗函数max)

在使用GROUPBY子句时,总是需要将筛选的所有数据进行分组操作,它的分组作用域是整张表。分组以后,为每个组只返回一行。而使用基于窗口的操作,类似于分组,但却可以对这些"组"(即窗口...

你还不知道什么是MySQL窗口函数?(mysql5.7窗口函数)

MySQL中的窗口函数是一类用来在某一部分查询结果上进行计算的函数,这些函数的用法与普通的聚合函数如SUM、AVG、COUNT类似,但是与聚合函数不同的是,窗口函数不会讲多行数据合并成一行结果,而是...

精通88道题包你面试通过BAT-精简版-不得不收藏!

J2SE基础1.九种基本数据类型的大小,以及他们的封装类。2.Switch能否用string做参数?3.equals与==的区别。4.Object有哪些公用方法?5.Java的四种引用,强弱...

Transact-SQL学习笔记21——排名窗口函数

将OVER()子句和排名函数连用,就是排名窗口函数,它们只能用在SELECT子句或ORDERBY子句之后。如果放在SELECT之后,它运行的逻顺序在DISTINCT之前。逻辑处理顺序如下:SE...

MySQL8 窗口函数是真的省事!(mysql中的窗口函数)

@[toc]MySQL9已经出来了,MySQL8相信也慢慢走进各位小伙伴的工作中了。MySQL8还是有很多重量级变化的,一些底层优化大家在使用中有时候不易察觉,但是有一些用法,还是带给我们耳目一...

Lodash 这 20 个方法,既高级又超级实用!

一、安全操作篇1._.get:防御性取值2._.set:智能路径赋值3._.invoke:安全方法调用二、集合处理篇4._.keyBy:快速对象映射5._.orderBy:多条件排序6._...

Oracle有哪些常见的函数?(oracle常用函数有哪些)

恢复删除的数据insertinto'表名'select*from'表名'asofTIMESTAMPTO_TIMESTAMP("当前时间&#...

excel的高级用法——宏,原来如此实用

使用excel时,直接手动计算或者输入公式,你会感到很苦恼或者操作很繁琐,如果使用vba直接输出结果,虽然效率很高,但是不够直观。excel宏最方便的用法是作为公式里的函数使用,打开宏编辑器,编写一个...

7 RDD常用算子(2)(rd算法)

filter()deffilter(f:T=>Boolean):RDD[T]函数说明将数据根据指定的规则进行筛选过滤,符合规则的数据保留,不符合规则的数据丢弃。当数据进行筛选过滤后,分...

从零开始学SQL进阶,数据分析师必备SQL取数技巧,建议收藏

上一节给大家讲到SQL取数的一些基本内容,包含SQL简单查询与高级查询,需要复习相关知识的同学可以跳转至上一节,本节给大家讲解SQL的进阶应用,在实际过程中用途比较多的子查询与窗口函数,下面一起学习。...

SQL窗口函数知多少?(sql窗口怎么执行)

我们在日常工作中是否经常会遇到需要排名的情况,比如:每个部门按业绩来排名,每人按绩效排名,对部门销售业绩前N名的进行奖励等。面对这类需求,我们就需要使用sql的高级功能——窗口函数。一、什么是窗口函数...

SQL开窗函数讲解,让查询统计更简单

用了这么多关系型数据库产品,开源的商业的,如:Oracle、MySql(注意5.7以上版本才可以使用)、SqlServer、postgreSQL。如果从应用角度来看,谁都逃离不了增删改查;而查又是难点...

mysql窗口函数(mysql窗口函数rank)

MySQL窗口函数是一种高级的SQL函数,它可以进行一些比较复杂的数据分析和处理。与传统的聚合函数不同,窗口函数不会合并行,而是根据特定的条件为每行分配一个值。MySQL窗口函数可以用来计算每...

一文讲懂SQL窗口函数 大厂必考知识点

大家好,我是宁一。今天是我们的第24课:窗口函数。窗口函数,也叫OLAP(OnlineAnallyticalProcessing,联机分析处理),可以对数据库数据进行实时分析处理。窗口函数是数据分...

C++20 四大特性之一:Module 特性详解

C++20最大的特性是什么?最大的特性是迄今为止没有哪一款编译器完全实现了所有特性。文章来源:网易云信有人认为C++20是C++11以来最大的一次改动,甚至比C++11还要大。本文仅介绍...