运维开发网

集群

0
  • 合理设置redis主从buffer 不错

    背景 某次抢购时,一个redis集群的某个分片,从实例响应时间陡增到几十秒,报警后运维将其中一个本应该下线的slave下掉,问题减轻但没有解决,又把另一个正常的slave下线掉,问题消失。 master日志 09:59:11.842 # Client id=19768058 ad...[详细]

    2020-06-13 10:35 分类:大数据
  • Redis单机和集群配置(版本在5.0后)

    单机版的配置:    1. 下载redis压缩包,然后解压缩文件(tar xzf);   2. 进入解压后的redis文件目录,编译redis源文件(make,没有c环境要gcc);   3. 把编译好的redis源文件安装到/usr/local/redis目录下,如果/local目录下没...[详细]

    2020-06-13 10:23 分类:大数据
  • redis集群变更

    目录 redis集群变更 1. 集群扩容 1.1 在db01上创建新节点 1.2 在db01上启动新节点 1.3 使用工具发现节点并重新分配槽位 1.4 输入需要迁移多少个槽位 1.5 重新做主从关系 1.6 当前复制关系 2.集群收缩 2.1 进入脚本目录 2.2 命令执行过程 ...[详细]

    2020-06-11 18:59 分类:大数据
  • redis 集群,分布式

    其他方案: http://www.infoq.com/cn/news/2014/11/open-source-redis-cache?utm_source=infoq&utm_medium=related_content_link&utm_campaign=relatedContent_articles_clk   http://haiziwoainixx.iteye.com/blog/20871[详细]

    2020-06-11 18:33 分类:大数据
  • 基于docker构建flink大数据处理平台

    由于公司业务需求,需要搭建一套实时处理数据平台,基于多方面调研选择了Flink. 初始化Swarm环境(也可以选择k8s)   部署zookeeper集群 基于docker-compose ,使用 docker stack 部署在容器中,由于zookeeper存在数据持久化存储,这块后...[详细]

    2020-06-11 16:38 分类:云计算
  • Redis异构集群数据实时迁移

    背景 由于历史原因,公司的缓存方案使用的是Codis,并且一个大部门公用一个集群,我们计划废弃Codis,用Redis原生的集群架构,为什么要废弃Codis呢,主要有两个原因:1、Codis官方已经很久没有更新维护了,Redis官方版本已经迭代到5.x.x了...[详细]

    2020-06-11 16:14 分类:大数据
  • Redis三种集群模式-哨兵机制

    Redis哨兵机制,一主二从 注:Redis哨兵切换,建议一主多从 一、一主二从   教程步骤:https://www.cnblogs.com/pinghengxing/p/11139997.html 二、哨兵配置(sentinel.conf)    哨兵机制也分单台以及集群,在此我们只构建哨兵集群  ...[详细]

    2020-06-11 15:28 分类:大数据
  • 7.redis cluster(集群)

    1.为什么需要集群 (1)并发量:OPS redis性能可以达到10W/每秒,如果业务需要100W/每秒呢 (2)数据量 机器内存:16-256G,业务需要500G呢 (3)解决方法: 分布式:简单的认为加机器 2.数据分布 常用的两种分布方式 方式一:顺序分布 举例:有...[详细]

    2020-06-11 15:11 分类:大数据
  • redis集群搭建和哨兵模式以及AOF和RDB持久化

    Redis主从+哨兵模式 1、环境准备 (1)三台独立的linux主机 (2)IP分别为:10.150.200.182 (从)?10.150.200.184(从) ?10.150.200.195(主) 2、安装redis (1)分别在各个主机上安装redis,以10.150.200.182为例,步骤如下: ①下载redis稳定...[详细]

    2020-06-11 14:14 分类:大数据
  • Redis5以上版本伪集群搭建(高可用集群模式)

    redis集群需要至少要三个master节点,我们这里搭建三个master节点,并且给每个master再搭建一个slave节点,总共6个redis节点,这里用一台机器(可以多台机器部署,修改一下ip地址就可以了)部署6个redis实例,三主三从,搭建集群的步骤如...[详细]

    2020-06-11 13:50 分类:大数据