大数据运维技术第8章 ZooKeeper组件安装配置课件.pptx

ZooKeeper相关知识; 会话（Session）：Session指的是ZooKeeper服务器与客户端会话。在ZooKeeper中，一个客户端连接是指客户端和服务器之间的一个TCP长连接。客户端启动的时候，首先会与服务器建立一个TCP连接，从第一次连接建立开始，客户端会话的生命周期也开始了。通过这个连接，客户端能够通过心跳检测与服务器保持有效的会话，也能够向ZooKeeper服务器发送请求并接受响应，同时还能够通过该连接接收来自服务器的Watch事件通知。Session的sessionTimeout值用来设置一个客户端会话的超时时间。当由于服务器压力太大、网络故障或是客户端主动断开连接等各种原因导致客户端连接断开时，只要在sessionTimeout规定的时间内能够重新连接上集群中任意一台服务器，那么之前创建的会话仍然有效。在为客户端创建会话之前，服务端首先会为每个客户端都分配一个sessionID。由sessionID是ZooKeeper会话的一个重要标识，许多与会话相关的运行机制都是基于这个sessionID的，因此，无论是哪台服务器为客户端分配的sessionID，都务必保证 ZooKeeper是一款分布式协调服务，它是大数据领域中的关键组件，尤其在分布式系统中起到至关重要的作用。本课程主要讲解ZooKeeper的安装配置以及核心概念，帮助理解如何在实际环境中运用ZooKeeper。 我们要了解ZooKeeper的核心概念之一——会话（Session）。会话是客户端与ZooKeeper服务器之间的交互过程，它始于客户端建立的TCP长连接。客户端启动时，会与服务器建立TCP连接，从而开启会话生命周期。通过这个连接，客户端能进行心跳检测以保持会话有效性，发送请求并接收响应，同时接收服务器的Watch事件通知。Session的超时时间（sessionTimeout）定义了客户端在断开连接后重新连接的时间限制。如果在超时时间内，客户端能重新连接到集群中的任何一台服务器，原来的会话将继续有效。在会话创建前，服务器会给每个客户端分配唯一的sessionID，它是会话的关键标识，用于支持多种会话机制，确保其在集群中的全局唯一性。 接下来，我们探讨ZooKeeper的数据模型。ZooKeeper的数据模型是一个Znode树，其中Znode是数据单元，分为两种类型：持久节点和临时节点。持久节点一旦创建，除非手动删除，否则将持续存在。而临时节点的生命周期与客户端会话绑定，会话结束，临时节点随之消失。此外，Znode还可以设置SEQUENTIAL属性，创建时自动在节点名后附加递增数字。 ZooKeeper还维护每个Znode的版本信息，包括version（Znode版本）、cversion（子节点版本）和aversion（ACL版本），用于追踪数据的变化。Watcher是另一个重要特性，允许客户端在特定节点上注册监听器，当事件触发时，服务端会将通知推送给感兴趣的客户端，这是实现分布式协调的关键。 ZooKeeper的四个主要特点概括了其强大功能： 1. 顺序一致性：事务请求按客户端发出的顺序一致应用。 2. 原子性：事务要么在所有机器上全部成功，要么全部不成功。 3. 单一系统映像：所有客户端看到的数据模型相同。 4. 可靠性：一旦更改被应用，结果将被持久化，直到被新的更改覆盖。 在配置ZooKeeper服务时，主要涉及`zoo.cfg`配置文件，其中包含了服务器的各种参数。`myid`文件用于区分不同的服务器。默认配置适用于基本的测试和评估，但根据实际应用需求，可能需要调整这些参数以优化性能和稳定性。 ZooKeeper在大数据运维中扮演着协调者角色，它的会话管理、数据模型、版本控制、Watcher机制和权限控制（ACL）共同构建了一个强大、可靠的分布式服务框架。掌握这些知识对于理解和操作分布式系统至关重要。