运维开发网

Linux配置zookeeper 和zookeeper简单介绍

运维开发网 https://www.qedev.com 2020-07-13 13:45 出处:网络
一、zookeeper介绍? 一、zookeeper 简单介绍? 1.什么是集群? //很多台服务器保持连接通讯状态,并且所有的服务器做同一件事就称之为集群

一、zookeeper介绍?

一、zookeeper 简单介绍?
    1.什么是集群?
//        很多台服务器保持连接通讯状态,并且所有的服务器做同一件事就称之为集群

    2.什么是zookeeper?
        注册中心就是zookeeper(eureka,consul)的别名
        zookeeper是apache开源基金会下的一个顶级项目
        zookeeper是一个致力于开发和维护的开源服务器,作用于项目中的协调和控制功能
        
        场景:
            空调坏了,学生就去找班主任说空调坏了,班主任也不会修空调,班主任觉得孟老师会修空调,结果孟老师也不会,孟老师最终给售后打电话,售后假设把空调修好了,最终学生达到了预期效果
            学生就是需求者,售后是服务者,孟老师和班主任就是协调者
        zookeeper从logo来看是动物园管理员,这个动物园中所有的动物都由zookeeper进行管理,管理了动物的衣食住行,zookeeper在最早的时候只适用于Hadoop的生态圈,在Hadoop的生态圈中所有的框架都是动物,zookeeper对他们进行管理,管理框架的健康(心跳),服务器的调用方和服务器的生产方,也就是说最终服务的客户端不再直接向服务的服务器发送数据,首先客户端先找到zookeeper,根据zookeeper的反馈再找服务器端
            hadoop是大象
            hbase是鲸鱼
            pig是猪
            ....

        在zookeeper中存放了大量的数据(非常有用),但是这些数据开发人员看不到,并且zookeeper会按照规定的时间对已经向自己注册服务索要心跳,
        根据观察者模式,一旦检测到状态发生变化,最终向zookeeper注册过的观察者(服务器)要应对处理措施!
    /*    
        被观察对象是------------->zookeeper
        观察对象是---------------->服务器
    */
    3.zookeeper的应用场景:
        在之前只适用于大数据,但是随着web项目越来越大,发展越来越快,zookeeper已经完全适用于整个web项目,在web项目中仍然起着协调和控制的作用
        zookeeper是以集群的形式存在,也就是说三台zookeeper做同一件事,
        /*
            在官方文档中说明,zookeeper以奇数台为稳定,并且以中间这一台为leader,也就是说zookeeper至少需要三台(不是一台,一台称之为单节点)
        */
        为什么说以奇数台为稳定??
            zookeeper是以一个leader带领很多个follower完成的集群,并且奇数和选举机制有关

 

 

二、Linux配置 zookeeper?

二、配置zookeeper?
    
        1. 新建三台虚拟机  五步走
            vim /etc/sysconfig/network
            vim /etc/hosts
            service iptables stop
            chkconfig iptables off
            reboot
            
    
        2.配置jdk
            2.1导入jdkjar包。
            2.2配置java环境变量。
            
        
        
        3.配置免秘钥登录
            生成自己的公钥    四次回车(都不能输入密码)
        /*  
            ssh-keygen -t rsa 
            ssh-keygen -t rsa
            ssh-keygen -t rsa
            ssh-keygen -t rsa
            ssh-keygen -t rsa
        
        */
            把自己的公钥copy其他服务器上  另外两台都需要copy!!!
        /*    
            ssh-copy-id ip地址/hostname
            ssh-copy-id ip
            ssh-copy-id 192.168.11.116
            ssh-copy-id haha 
            
        */    
        配置成功后,ssh 连接访问。
            /**
                ssh +另一条虚拟机的ip地址/名字
                ssh haha
                ssh zookeeper
                ssh zookeeper 
                
                
            */
            
        4解压zookeeper
            tar -zxvf xxxxx
            
            
        5.把conf目录下的
        [zoo-sample.cfg文件改名为zoo.cfg]
        
        修改文件的命令: mv +需要修改的文件名 空格  修改后的文件名。  
        
        /*  mv zoo-sample.cfg zoo.cfg 
            mv zoo-sample.cfg zoo.cfg
            mv zoo-sample.cfg zoo.cfg
            mv zoo-sample.cfg zoo.cfg
            mv zoo-sample.cfg zoo.cfg
            mv zoo-sample.cfg zoo.cfg
        */    
        
        6.修改dataDir参数(不是必须所要修改的,但是要求修改)    指向的文件就是zookeeper每一台节点的唯一标识(id),而且这个唯一标识不能重复!!!!
            
            
            1.在zookeeper目录下中创建文件夹data   获取data的 pwd路径。(pwd )
            /*
                mkdir data 
                cd data  
                pwd  获取路径
                
            */
            
            2.退出 ,在conf下修改 dataDir 修改为刚才所创建的data目录的绝对路径把dataDir修改为刚才所创建的data目录的绝对路径
            /*
                vim dataDir
                把dataDir修改为刚才所创建的data目录的绝对路径    dataDir=/home/apps/zookeeper-3.4.6/data
            */ 
            
            
            
        7.在zoo.cfg文件的末尾添加
        /**
            server.1=zookeeper01:2888:3888
            server.2=zookeeper02:2888:3888
            server.3=zookeeper03:2888:3888
            
        7.1    server.的数据就是每一台zookeeper的唯一标识  
            
        7.2    zookeeper01:HOSTNAME或者可以配置IP地址
            
        7.3    2888:zookeeper集群之间通讯所用的端口号
            
        7.4    3888:zookeeper集群的选举leader端口号
    */        
    
        8.在之前创建data文件夹下创建myid文件
            touch myid
            
        9.写入myid文件
            vim myid
            1
            
        10.通过scp发送到另外两台服务器上
        语法   scp -r /home/apps/(需要发送的路径) 空格 zookeeper02(目标的ip/hostname):/home/ (需要发送到的目标位置)
               把zookeeper01 虚拟机上的  /home/apps/ 发送到 zookeeper02 的 :home/ 目录下。
        
        /*
            scp -r /home/apps/ zookeeper02:/home/
            scp -r /home/apps/ zookeeper03:/home/    
            scp -r /home/apps/ zookeeper02:/home/
            
            
            
        */    
            将配java的配置环境也copy过去。
            
            scp -r /etc/profile zookeeper01:/etc/
            scp -r /etc/profile zookeeper01:/etc/
            
            scp -r /etc/proflie     需要的虚拟机的ip:/etc/
            (本机需要copy的地址)                       (需要copy到的虚拟机的地址)
            /*
                scp -r /etc/proflie zookeeper02:/etc/
                scp -r /etc/proflie zookeeper03:/etc/
                scp -r /etc/proflie haha:/etc/
            */
            
        立即生效命令
            source /etc/profile
        尝试了一下  不用也可以。不敢保证。。。    
            
            
        4.10.根据server.的数字分别修改myid文件
            把zookeeper02修改为2
            把zookeeper03修改为3
            
        4.11.启动zookeeper
            在bin目录中启动
        /*    
            ./zkServer.sh start
            ./zkServer.sh start
            ./zkServer.sh start
            ./zkServer.sh start
        */    
            看到以下信息说明启动成功:
                JMX enabled by default
                Using config: /home/apps/zookeeper-3.4.6/bin/../conf/zoo.cfg
                Starting zookeeper ... STARTED
                
                
        4.12.分别检测三台zookeeper服务器的状态
            在bin目录中
        /*    
            ./zkServer.sh status
            ./zkServer.sh status 
        */    
        
        关闭
        /*
            ./zkServer.sh stop
            ./zkServer.sh stop
            ./zkServer.sh stop
        */    

        leader  和 follower  
        老大         小弟
            
    5.zookeeper的选举机制
        5.1    zookeeper采用的是Paxos算法实现的选举机制
        换句话说半数选举机制 谁的server id大  谁就是大哥!!!
        
        半数选举  leader产生 该节点高32位会发生改变。
        
        
        
        5.2zid 事物的id一共有64位, 分别高32 位  和 低32 位。    
        当leader宕机。所有服务器的zid 会自增。
        自增的低32位 根据某个规则进行增加 高32位不变。
        
        zid 的低32为越小,被选举的可能性就越大,被操作的可能性就越大
        
        /*
        zxid (低32 +高32位 合并) 
            越大被操作的可能就越大。
            
        
        */
        
0

精彩评论

暂无评论...
验证码 换一张
取 消