Zookeeper再linux 下的一些操作

一世执手 提交于 2019-12-02 08:51:51

zookeeper的安装目录:/usr/local/zookeeper-3.4.6/bin/zkServer.sh;

配置文件路径:../conf/zoo.cfg

端口 :2181;

 

ZooKeeper服务命令:

     在准备好相应的配置之后,可以直接通过zkServer.sh 这个脚本进行服务的相关操作

  • 1. 启动ZK服务:       sh bin/zkServer.sh start
  • 2. 查看ZK服务状态: sh bin/zkServer.sh status
  • 3. 停止ZK服务:       sh bin/zkServer.sh stop
  • 4. 重启ZK服务:       sh bin/zkServer.sh restart

zk客户端命令

ZooKeeper命令行工具类似于Linux的shell环境,不过功能肯定不及shell啦,但是使用它我们可以简单的对ZooKeeper进行访问,数据创建,数据修改等操作.  使用 ./zkCli.sh -server 127.0.0.1:2181 连接到 ZooKeeper 服务,连接成功后,系统会输出 ZooKeeper 的相关环境以及配置信息。

命令行工具的一些简单操作如下:

  • 1. 显示根目录下、文件: ls / 使用 ls 命令来查看当前 ZooKeeper 中所包含的内容
  • 2. 显示根目录下、文件: ls2 / 查看当前节点数据并能看到更新次数等数据
  • 3. 创建文件,并设置初始内容: create /zk "test" 创建一个新的 znode节点“ zk ”以及与它关联的字符串
  • 4. 获取文件内容: get /zk 确认 znode 是否包含我们所创建的字符串
  • 5. 修改文件内容: set /zk "zkbak" 对 zk 所关联的字符串进行设置
  • 6. 删除文件: delete /zk 将刚才创建的 znode 删除
  • 7. 退出客户端: quit
  • 8. 帮助命令: help
 

ZooKeeper 常用四字命令:

      ZooKeeper 支持某些特定的四字命令字母与其的交互。它们大多是查询命令,用来获取 ZooKeeper 服务的当前状态及相关信息。用户在客户端可以通过 telnet 或 nc 向 ZooKeeper 提交相应的命令

  • 1. 可以通过命令:echo stat|nc 127.0.0.1 2181 来查看哪个节点被选择作为follower或者leader
  • 2. 使用echo ruok|nc 127.0.0.1 2181 测试是否启动了该Server,若回复imok表示已经启动。
  • 3. echo dump| nc 127.0.0.1 2181 ,列出未经处理的会话和临时节点。
  • 4. echo kill | nc 127.0.0.1 2181 ,关掉server
  • 5. echo conf | nc 127.0.0.1 2181 ,输出相关服务配置的详细信息。
  • 6. echo cons | nc 127.0.0.1 2181 ,列出所有连接到服务器的客户端的完全的连接 / 会话的详细信息。
  • 7. echo envi |nc 127.0.0.1 2181 ,输出关于服务环境的详细信息(区别于 conf 命令)。
  • 8. echo reqs | nc 127.0.0.1 2181 ,列出未经处理的请求。
  • 9. echo wchs | nc 127.0.0.1 2181 ,列出服务器 watch 的详细信息。
  • 10. echo wchc | nc 127.0.0.1 2181 ,通过 session 列出服务器 watch 的详细信息,它的输出是一个与 watch 相关的会话的列表。
  • 11. echo wchp | nc 127.0.0.1 2181 ,通过路径列出服务器 watch 的详细信息。它输出一个与 session 相关的路径。

一、Zookeeper单击模式安装及使用

1、系统环境

2、导入JDK和Zookeeper包

1)、使用SecureCRT工具打开SFTP连接,直接拖拽,到当前用户文件夹下,然后使用mv命令(mv 文件 目标文件夹)移动到自定义路径下

2)、使用tar -zxvf 包名,解压JDK和Zookeeper

 3、配置java环境变量,vi /etc/profile,编辑完成保存后,使用source /etc/profile使环境变量生效,java -version命令验证

4、在zookeeper目录下的conf目录下,新建zoo.cfg文件并配置如下(zoo.cfg文件是Zookeeper默认配置文件,其配置案例在zoo_samples.cfg中)

 

tickTime:服务器与服务器之间或服务器与客户端之间心跳间隔

dataDir:Zookeeper保存数据的目录,默认情况下,Zookeeper将写数据的日志文件也保存在这;如果目录不存在启动时候会自动创建

clientPort:客户端连接Zookeeper服务器的端口,Zookeeper会监听这个端口,接收客户端的访问请求

5、启动Zookeeper,在bin文件夹下调用zkServer.sh start命令,start后面如果不指定配置文件路径,默认使用con/zoo.cfg

查看服务状态,./zkServer.sh status

6、客户端连接服务端,bin/zkCli.sh -server 127.0.0.1:2181

7、增删改查命令使用,进入客户端后通过help可查看所有命令使用方法

1)、ls 查看znode节点

2)、create 创建znode节点,节点后面必须赋值,否则不会创建成功

3)、get 获取节点值

4)、set 修改节点值

5)、创建/test子节点,注意获取/test值时,cversion由0变为1

6)、delete 删除节点

如果有子节点,父节点不能删除,需要先删除子节点再删除父节点

7)、quit 退出客户端操作界面

8、停掉Zookeeper服务

二、Zookeeper集群模式搭建(3台,最好奇数台,根据Leader选举算法Paxos协议,半数原则)

zk1对应IP:192.168.7.128

zk2对应IP:192.168.7.216

zk3对应IP:192.168.7.217

1、每台服务器上搭建基础环境,参照单击模式搭建

2、在Zookeeper保存数据的文件路径下创建myid文件,并写入server对应值(如果保存数据文件路径不存在自己创建),各台机器执行如下命令

zk1中命令:echo "1">myid;zk2中命令:echo "2">myid;zk3中命令:echo "3">myid

最终如下

3、配置各台及其conf/zoo.cfg文件如下

initLimit:Zookeeper集群中,连接到Leader的Follower服务初始化连接时最长限制时间多少个心跳间隔,如上配置5,表示5*2000=10秒,10秒内没有连接上表示Follower连接失败

syncLimit:Leader和Follower之间发送消息,请求和应答最长心跳间隔数,如上2*2000=4秒

 server.x(x表示上面配置的1,2,3),x就是各台服务器中写入myid文件的数

IP:2888:3888      IP就是各服务器IP,2888是这个服务器与集群中的Leader进行信息交换的端口,3888是表示万一集群中的Leader服务器挂掉,需要一个端口来重新进行选举,选出一个新Leader,也就是这个3888端口是用来执行选举Leader时候用

4、启动各台Zookeeper服务 bin/zkServer.sh start ,都启动成功后,bin/zkServer.sh status查看服务器状态

起初查看状态报错如下,后来想到是防火墙的问题,就执行 systemctl stop firewalld 关闭即可

查看防火墙并关闭

各台服务器 bin/zkServer.sh restart 命令重启Zookeeper服务,查看状态

zk1服务器如下,注意Mode:leader,即此服务器为集群Leader(Leader选举有算法,并非第一个就是Leader)

zk2服务器如下,注意Mode:

 

zk3服务器和zk2服务器一样,Mode都是follower

5、测试集群,随便一个服务器上增删改节点,另一个服务器上也会一致性变化(可自行验证)

6、如果Leader服务器挂掉,会选出另一台Leader服务器,3台服务器最多可挂掉一台,超过一台挂掉Zookeeper就不可用了

 三、ZooKeeper JavaAPI使用,直接上代码,看注释


package com.hjp.zookeeper;

import org.apache.zookeeper.WatchedEvent;
import org.apache.zookeeper.Watcher;
import org.apache.zookeeper.ZooKeeper;

import java.io.IOException;
import java.util.concurrent.CountDownLatch;

public class ConnectionWatcher implements Watcher {

    private static final int SESSION_TIMEOUT = 5000;

    protected ZooKeeper zk;
    private CountDownLatch connectedSignal = new CountDownLatch(1);

    public void connect(String hosts) throws IOException, InterruptedException {
        //第一个参数是Zookeeper服务主机地址,可指定端口号,默认为2181;第二个参数以毫秒为单位的会话超时参数;
        // 第三个参数是一个Watcher对象的实例。Watcher对象接收来自于Zookeeper的回调,以获得各种事件通知,
        // 本例中CreateGroup是一个Watcher对象,因此参数为this
        zk = new ZooKeeper(hosts, SESSION_TIMEOUT, this);
        //当一个ZooKeeper的实例被创建时,会启动一个线程连接到Zookeeper服务。
        // 由于对构造函数的调用是立即返回的,因此在使用新建的Zookeeper对象之前一定要等待其与Zookeeper服务之间的连接建立成功。
        // 使用CountDownLatch使当前线程等待,直到Zookeeper对象准备就绪
        connectedSignal.await();
    }

    public void process(WatchedEvent watchedEvent) {
        //客户端与ZK建立连接后,Watcher的process方法会被调用,参数是表示该连接的事件,
        // 连接成功后调用CountDownLatch的countDown方法,计数器减为0,释放线程锁,zk对象可用
        if (watchedEvent.getState() == Event.KeeperState.SyncConnected) {
            connectedSignal.countDown();
        }
    }

    public void close() throws InterruptedException {
        zk.close();
    }
}

连接ZK

package com.hjp.zookeeper;

import org.apache.zookeeper.CreateMode;
import org.apache.zookeeper.KeeperException;
import org.apache.zookeeper.ZooDefs.Ids;

import java.io.IOException;
import java.util.List;
import java.util.concurrent.CountDownLatch;

public class ZKOperateAPI extends ConnectionWatcher {

    //创建组
    public void create(String groupName, String data) throws KeeperException, InterruptedException {
        String path = "/" + groupName;
        //创建znode节点,第一个参数为路径;第二个参数为znode内容,字节数组;
        // 第三个参数访问控制列表(简称ACL,此处使用完全开放的ACL,允许任何客户端对znode进行读写);
        // 第四个为创建znode类型,此处是持久的(两种类型,短暂的和持久的,短暂类型会在客户端与zk服务断开连接后,被zk服务删掉,而持久的不会)
        String createPath = zk.create(path, data.getBytes(), Ids.OPEN_ACL_UNSAFE, CreateMode.PERSISTENT);
        System.out.println("Created " + createPath);
    }

    //加入组
    public void join(String groupName, String memberName, String data) throws KeeperException, InterruptedException {
        String path = "/" + groupName + "/" + memberName;
        //创建短暂znode,会在客户端断开连接后删掉
        String createPath = zk.create(path, data.getBytes(), Ids.OPEN_ACL_UNSAFE, CreateMode.EPHEMERAL);
        System.out.println("Create " + createPath);
    }

    //列出组成员
    public void list(String groupName) {
        String path = "/" + groupName;
        try {
            //第一个参数为组名,即znode路径;第二个参数是否设置观察标识,如果为true,那么一旦znode状态改变,当前对象的Watcher会被触发
            List<String> children = zk.getChildren(path, false);
            if (children.isEmpty()) {
                System.out.printf("No members in group %s\n", groupName);
                System.exit(1);
            }
            for (String child : children) {
                System.out.println(child);
            }
        } catch (KeeperException.NoNodeException ex) {
            System.out.printf("Group %s does not exist\n", groupName);
            System.exit(1);
        } catch (InterruptedException e) {
            e.printStackTrace();
        } catch (KeeperException e) {
            e.printStackTrace();
        }
    }

    //删除组
    public void delete(String groupName) throws KeeperException, InterruptedException {
        String path = "/" + groupName;
        try {
            List<String> children = zk.getChildren(path, false);
            for (String child : children) {
                //删除方法第一个参数指定路径,第二个参数是版本号;这是一种乐观锁机制,如果指定的版本号和对应znode版本号一致才可删除;
                // 如果设置为-1,不校验可直接删除
                zk.delete(path + "/" + child, -1);
            }
            zk.delete(path, -1);
        } catch (KeeperException.NoNodeException ex) {
            System.out.printf("Group %s does not exist\n", groupName);
            System.exit(1);
        }
    }

}

增删改查操作,继承连接类


import com.hjp.zookeeper.ZKOperateAPI;
import org.junit.Test;

public class TestZK {

    @Test
    public void create() throws Exception {
        ZKOperateAPI operateAPI = new ZKOperateAPI();
        //端口号不写,默认是2181
//        operateAPI.connect("192.168.7.128:2181");
        operateAPI.connect("192.168.7.128");
        operateAPI.create("testAPI", "aaa");
        operateAPI.close();
    }

    @Test
    public void join() throws Exception {
        ZKOperateAPI operateAPI = new ZKOperateAPI();
        operateAPI.connect("192.168.7.128");
        ;
        operateAPI.join("testAPI", "testAPIChild", "aaaChild");
        //模拟正在某种操作,休眠20秒后,断开zk服务连接,可查看zk服务中短暂znode被删除
        Thread.sleep(20000);
        operateAPI.close();
    }

    @Test
    public void list() throws Exception {
        ZKOperateAPI operateAPI = new ZKOperateAPI();
        operateAPI.connect("192.168.7.216");
        operateAPI.list("testAPI");
        operateAPI.close();
    }

    @Test
    public void delete() throws Exception{
        ZKOperateAPI operateAPI = new ZKOperateAPI();
        operateAPI.connect("192.168.7.217");
        operateAPI.delete("testAPI");
        operateAPI.close();
    }

}

测试执行代码

如果在java 连接的过程中报 Exception in thread "main" java.lang.NoClassDefFoundError: org/slf4j/LoggerFactory     异常

那么需要将zookeeper 安装目录下的 lib文件夹下的相关jar包导入到工程中

易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!