大数据生态之zookeeper(知识点梳理)

发布时间:2020-07-10 15:30:17 作者:原生zzy
来源:网络 阅读:450

1.zookeeper介绍

    (1)zookeeper简介:

              Zookeeper是一个分布式的,开放源代码的分布式应用程序协调服务,是Google的chubby一个开源的实现。

     它提供了简单原始的功能,分布式应用可以基于它实现更高的服务,比如分布式同步,配置管理,集群管理

     命名管理,队列管理它被设计为易与编程,使用文件系统目录树作为数据模型。服务端跑在 java 上,提供 java 和 C 的客户端 API。

              zookeeper是集群的管理者,监视着集群中各个节点的状态,根据节点提供的反馈进行一步合理操作。最终,将简单易用的接口

       和功能稳定,性能高效的系统提供给用户。

                    官网地址:

                                     http://ZooKeeper.apache.org/  

                    官网快速开始地址:

                                      http://ZooKeeper.apache.org/doc/trunk/ZooKeeperStarted.html  

                    官网 API 地址:

                                     http://ZooKeeper.apache.org/doc/r3.4.10/api/index.html  

 

2.zookeeper的相关功能

     (1)文件系统:

                   ZooKeeper 的命名空间就是 ZooKeeper 应用的文件系统,它和 linux 的文件系统很像,也是树状,这样就可以确定每个路径都是唯一的,

        对于命名空间的操作必须都是绝对路径操作。与Linux文件系统不同的是,Linux文件系统 有目录和文件的区别,而ZooKeeper统一叫znode,

        一个znode节点可以包含子znode,同时也可以包含数据。

                   znode 即是文件夹又是文件的概念,所以在 ZooKeeper 这里面就不叫文件文 件也不叫文件夹,叫znode,每个znode有唯一的路径标识,

        既能存储数据,也能创建子znode。但是znode只适合存储非常小的数据,不能超过1M,最好都小于1K

                   zookeeper的文件系统的特点:

 

     (2)znode介绍:

                    znode在类型上分为两种:短暂的(断开时删除)、持久的(断开时保留)。但是znode有4形式的节点表现:

persistent持久化znode节点,一旦创建这个znode点存储的数据不会主动消失,除非客户端主动delete
Persistent_sequential自动增加顺序编号的znode节点,比如ClientA 去 zk service 上建 立一个 znode 名字叫做/zk/conf,指定了
这种类型的节点后 zk 会 创 建 /zk/conf0000000000 , ClientB 再 去 创 建 就 是 创 建 /zk/conf0000000001,
ClientC 是创建/zk/conf0000000002,以后任 意 Client 来创建这个 znode 都会得到一个比当前 zk 命名空间最
大 znode 编号+1 的 znode,也就说任意一个 Client 去创建 znode 都是保证得到的 znode 是递增的,而且是
唯一的
。(原子性原则)
Ephemral临时znode节点,client连接到zkservice的时候会建立一个session,之后用这个zk连接实例创建该类型的znode
,一旦client关闭了zk的连接,服务器就会清除 session,然后这个 session 建立的 znode 节点都会从命名空间
消失。
Ephemral_ sequential临时自动编号设置,znode节点编号会自动增加,但是会随着session消失而消失。

                  zookeeper的znode的相关特点:

 

3.zookeeper的监听机制

     (1)监听机制介绍:

                  客户端注册监听它关心的目录节点,当目录节点发生变化(数据改变、节点删除、子目录节 点增加删除)时,zookeeper会通知客户端。

         监听机制保证zookeeper保存的任何的数据的任何改变都能快速的相应到监听了该节点的应用程序。监听器的工作机制,其实是在客户端会专门

         创建一个监听线程,在本机的一个端口上等待zk集群发送过来的事件。

      (2)监听的触发

               大数据生态之zookeeper(知识点梳理)

                       Znode的创建----nodeCreated

                      Znode 被删除---nodeDelete

                      Znode的数据变化---nodedatachanged

                      Znode的子节点的变化----nodeChildrenchange

           注意:监听只生效一次。(可以使用循环监听取,去实现一直监听)。

      (3)监听机制的工作原理

                大数据生态之zookeeper(知识点梳理)

       解释: ZooKeeper 的 Watcher 机制主要包括:客户端线程、客户端 WatcherManager、Zookeeper 服务 器三部分。客户端在向zookeeper服务器

                       注册的同时,会将Watcher对象存储在客户端的WatcherManager当中。当zookeeper服务器触发watcher事件后,会向客户端发送通知,

                       客户端线程从 WatcherManager 中取出对应的 Watcher 对象来执行回调逻辑。

        (4)监听的设置:

                  大数据生态之zookeeper(知识点梳理)

              相应的触发:

                      ls--触发---create 、delete(子节点)

                      get--触发—set

                      exists--触发--- create 、delete(当前节点)

4. Zookeeper的特点

        ZooKeeper 不能保证两个客户端能同时得 到刚更新的数据,如果需要最新数据,应该在读数据之前调用 sync()接口。

       偏序是指如果一个消息 b 在 消息 a 后被同一个发送者发布,a 必将排在 b 前面。

推荐阅读:
  1. Hadoop之生态系统
  2. 好程序员大数据学习路线之zookeeper干货

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

大数据 其他 zookeepe

上一篇:php在hbuilder中能写吗

下一篇:SuSE11安装MySQL5.6.40:RPM安装方式

相关阅读

您好,登录后才能下订单哦!

密码登录
登录注册
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》