新闻资讯
看你所看,想你所想

zookeeper

ZooKeeper是来自一个分布式的,开放源码的分布式应用程协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等

ZooKeeper的目标就是封装好复杂易出错的关键服务,将简单易用的接口和性能高效、功能稳定的系统提供给用户

ZooKeeper包含一个简单的原语集,提供Java和C的接口。

ZooKe360百科eper代码版本中,提供了分布式独享锁、选举、队列的接口,代码在$zookeeper_home\src\r良和ecipes。其中分布村细著强适仍伯益季锁和队列有Ja需核va和C两个版本,选举只有Java版本。(概述图片来源:)

  • 中文名称 动物园管理员
  • 外文名称 ZooKeeper
  • 类别 分布式系统的可靠协调系统
  • 特点 高效,可靠
  • 领域 大数据技术,分布式系统

原理

  ZooKeeper是以Fast Paxos算法为基础的来自,Paxos 算法存在活锁的问题,即当有多个proposer交错提交时,有可能互相排斥导致没有一个proposer能提交成功,而Fast Paxos做了一些优化,通过选举产生一个leader (领导者),只有leader才能360百科提交proposer,具体算法可见Fast Paxos。因此,要想弄懂ZooKeeper首先得对Fast Paxos有所了耐束曲差掌解。

  ZooKeeper的基本运转流程:

  1鱼就环地东言层、选举Leader。

  2、同步数据。

  3、选举Leader过程中算法有很多,但要达到的选举标准是一致的

  4、Leader要具有最高的执行笔每轻准答号ID,类似root权限。

庆界交去冷束容  5、集群中大多数的机器得到响应并接受选出的Leader。

特点介绍

  在Zookeeper中,znode是一个跟Unix文件系统路径相似的节点,可以往这个节点存储或获取数乡背前据。如果在创建znode时Flag设置为EPHEMERAL,那么当创建这个znode的节点和Zookeeper失去院农适连接后,这个znod尼定静散决衡象载矛e将不再存在在Zookeeper里,Zookeeper使用Watcher察觉事件信息。当客户端接收到事件信息,比如连接超时、节点数据改变、子节点改变,可以调用相应的行为来处理数据。Zookeeper的Wiki页面展示了如何使用Zookeeper来处理事件通知,队列,优先队列,锁,共享锁,可撤销的共享锁,两阶段销你及倍路钟提交。

  那么Zoo移求基贵的随keeper能做什么事情呢,简单的例子:假设我们有20个搜索引擎的服务器(每个负责总索引中的一部分的搜索任务)和一个总服务器(负责向这20个搜索引擎的服务器发出搜索请求并合并结果集),一个备用的总服务器(负责当总服务器宕机时替换总服务器),一个web的cgi(质我呼例向总服务器发出搜索请求)。搜索引擎的服务器中的15个服务器提供搜索服务,5个服务器正在生成频段索引。这20个搜索引擎的服务器经常要让正在提供搜索服务的服务器停止提供服务开很准亲展始生成索引,或生成索引的服务器已经把索引生成完成可以提供搜索服务了。使用Zookeeper可以保证总服务器自动感知有多少提供搜索引擎的服务器并向这些服务器发出搜索请减福知怕到胡歌尽求,当总服务器宕机时自动启用备用的总服务器。

客户端

  PHP

  注:以下代码依赖于PHP扩展libzookeeper。

  来自连接集群:

  创建节点:

  删除节点:

  获取节点值:

  获取子节点:

其他信息

  HBase和ZooKeeper

  HBase内置有ZooKeeper,也可以使用外部ZooKeeper。

  让HBase使用一个已有的不被HBase托管的ZooKeeper集群,需要设置 conf/hbase env sh文件中的HBASE_MANAGES_ZK 属性为 false

  ... # Tell HBase whether it should manage it's own 360百科instance of Zookeeper or not. export HBASE_MANAGES_ZK=false

  接下来,指明Zookeeper的host和端口。可以在 hbase-sit注那李毫液营e.xml中设置, 也可以在HBase的CLASSPATH下面加一个zoo.cfg配置文件。 HBase 会优先加载 zoo.cfg 里面的配置,把hbase-site.xml里面的覆盖掉.

  当HBase托管ZooKeeper的时候,Zookeeper集群的启动是息换米掉终章冷HBase启动脚本的一部分。但你需要自己去运行。你可以这样做

  ${HBASE_HOME}/bin/hbase-daemons 想画有科律把流型象sh {start,stop} zookeeper

  你可以用这条命令启动ZooKeeper而不启动HBase. HBASE_MANAGE静翻觉钢S_ZK 的值是 false, 如果你想在HBase重启的时候不重启ZooKeepe负朝蛋任则道r,你可以这样做

  对于独立Zoopkeeper的问向顾干角爱搞告题,你可以在 Zookeeper启动得到帮助.

转载请注明出处安可林文章网 » zookeeper

相关推荐

    声明:此文信息来源于网络,登载此文只为提供信息参考,并不用于任何商业目的。如有侵权,请及时联系我们:fendou3451@163.com