- Published on
Mycat学习实战-Mycat的zookeeper集群模式
- Authors
- Name
- 老杨的博客
Mycat 学习实战-Mycat 的 zookeeper 集群模式
[TOC]
1. ZooKeeper 简介
ZooKeeper 是一个面向分布式系统的构建块。当设计一个分布式系统时,一般需要设计和开发一些协调服务:
名称服务— 名称服务是将一个名称映射到与该名称有关联的一些信息的服务。电话目录是将人的名字映射到其电话号码的一个名称服务。同样,DNS 服务也是一个名称服务,它将一个域名映射到一个 IP 地址。在分布式系统中,您可能想跟踪哪些服务器或服务在运行,并通过名称查看其状态。ZooKeeper 暴露了一个简单的接口来完成此工作。也可以将名称服务扩展到组成员服务,这样就可以获得与正在查找其名称的实体有关联的组的信息。
锁定— 为了允许在分布式系统中对共享资源进行有序的访问,可能需要实现分布式互斥(distributed mutexes)。ZooKeeper 提供一种简单的方式来实现它们。
同步— 与互斥同时出现的是同步访问共享资源的需求。无论是实现一个生产者-消费者队列,还是实现一个障碍,ZooKeeper 都提供一个简单的接口来实现该操作。
配置管理— 您可以使用 ZooKeeper 集中存储和管理分布式系统的配置。这意味着,所有新加入的节点都将在加入系统后就可以立即使用来自 ZooKeeper 的最新集中式配置。这还允许您通过其中一个 ZooKeeper 客户端更改集中式配置,集中地更改分布式系统的状态。
领导者选举— 分布式系统可能必须处理节点停机的问题,您可能想实现一个自动故障转移策略。ZooKeeper 通过领导者选举对此提供现成的支持。
2. ZooKeeper 角色和端口
3. ZooKeeper 部署简介
4. ZooKeeper 部署管理 Mycat
4.1 环境
系统:CentOS7.3 jdk 版本:1.7 zookeeper 版本:3.4.10 mycat 版本:1.6
hostname | IP | myid |
---|---|---|
testA | 192.168.33.11 | 1 |
testB | 192.168.33.12 | 2 |
testC | 192.168.33.13 | 3 |
4.2 环境准备
为了测试方便,这里关闭系统防火墙和禁用 selinux,生产环境防火墙则需要开放 zookeeper 相关端口,2181、2888、3888。
# 关闭防火墙
systemctl stop firewalld.service
systemctl disable firewalld.service
# 关闭SELINUX
sed -i 's/SELINUX=enforcing/SELINUX=disabled/g' /etc/sysconfig/selinux
setenforce 0
4.3 安装 zookeeper
先在testA
节点安装,再同步到其它 2 个节点。
4.3.1 下载解压
mkdir -p /data/packages/
cd /data/packages/
wget http://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.4.10/zookeeper-3.4.10.tar.gz
cd /usr/local/
tar -zxvf /data/packages/zookeeper-3.4.10.tar.gz
ln -s zookeeper-3.4.10 zookeeper
cd zookeeper
mkdir data log
cd conf/
cp zoo_sample.cfg zoo.cfg
4.3.2 修改配置文件
vim zoo.cfg
# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just
# example sakes.
dataDir=/usr/local/zookeeper/data
dataLogDir=/usr/local/zookeeper/log
# the port at which the clients will connect
clientPort=2181
server.1=192.168.33.11:2888:3888
server.2=192.168.33.12:2888:3888
server.3=192.168.33.13:2888:3888
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1
4.3.3 添加 myid 文件
vim /usr/local/zookeeper/data/myid
写入 1
4.3.4 同步 zookeeper 目录到其它 2 个节点,修改 myid
rsync -avzP /usr/local/zookeeper/ root@192.168.33.12:/usr/local/zookeeper/
rsync -avzP /usr/local/zookeeper/ root@192.168.33.13:/usr/local/zookeeper/
并在 2 个节点分别修改对应的 myid
4.3.5 启动 zookeeper
cd /usr/local/zookeeper/bin/
./zkServer.sh start
4.4 安装 Mycat
同样,3 个节点都需要安装 mycat。
cd /data/packages/
wget http://dl.mycat.io/1.6-RELEASE/Mycat-server-1.6-RELEASE-20161028204710-linux.tar.gz
cd /usr/local/
tar -zxvf /data/packages/Mycat-server-1.6-RELEASE-20161028204710-linux.tar.gz
4.6 执行 mycat 初始化数据
3 个节点 Mycat 都执行如下脚本
sh /usr/local/mycat/bin/init_zk_data.sh
4.7 配置 mycat 支持 zookeeper
vim /usr/local/mycat/conf/myid.properties
loadZk=true
# zk集群地址,多个用","隔开
zkURL=127.0.0.1:2181
# zk集群内Mycat集群ID
clusterId=mycat-cluster-1
# Mycat集群内本实例ID,禁止重复
myid=mycat_fz_01
# Mycat集群内节点个数
clusterSize=3
clusterNodes=mycat_fz_01,mycat_fz_02,mycat_fz_03
#server booster ; booster install on db same server,will reset all minCon to 1
type=server
boosterDataHosts=dataHost1
4.8 用 zookeeper 配置 mycat
使用 ZooInspector 工具管理 ZooKeeper,以下是连接 zookeeper 方法。
连接成功后,可看到 mycat 集群的配置
修改相应配置
启动 mycat 后,mycat 配置文件会自动更新。
注意事项: * loadZk 必须改为 true 才生效 * zkURL 的地址是多个中间用“,”隔开 * clusterId,同一个 zk 内的集群 ID 必须唯一 * Myid:本实例的 id 在当前的 mycat 集群内 ID 唯一 * 配置完 zk 并启动 mycat 后,会更新本地 conf 下的相关配置文件。
参考资料: [1] http://mycat.io/ [2] 《分布式数据库架构及企业实践——基于 Mycat 中间件》 [3] 龙哥官方课程课件 [4] http://zookeeper.apache.org/ [5] https://www.ibm.com/developerworks/cn/data/library/bd-zookeeper/