运维开发网

kafka

0
  • Kafka中位移提交那些事儿

    本文已收录GitHub,更有互联网大厂面试真题,面试攻略,高效学习资料等之前我们说过,Consumer 端有个位移的概念,它和消息在分区中的位移不是一回事儿,虽然它们的英文都是 Offset。今天我们要聊的位移是 Consumer 的消费位移,它记录了...[详细]

    2020-07-05 09:26 分类:编程语言
  • 你一定不能错过的Kafka控制器

    控制器组件(Controller),是 Apache Kafka 的核心组件。它的主要作用是在 ApacheZooKeeper 的帮助下管理和协调整个 Kafka 集群。集群中任意一台 Broker 都能充当控制器的角色,但是,在运行过程中,只能有一个 Broker 成为控制器,行使...[详细]

    2020-07-05 09:22 分类:编程语言
  • 阿里架构师亲授:Kafka和RocketMQ的消息复制实现的差异点在哪?

    本文已收录GitHub,更有互联网大厂面试真题,面试攻略,高效学习资料等众所周知,消息队列在收发两端,主要是依靠业务代码,配合请求确认的机制,来保证消息不会丢失的。而在服务端,一般采用持久化和复制的方式来保证不丢消息。把消息复...[详细]

    2020-07-05 08:45 分类:编程语言
  • Python通过kerberos安全认证操作kafka方式

    如何通过Kerberos认证. 1.安装Kerberos客户端 CentOS: yum install krb5-workstation 使用which kinit查看是否安装成功;[详细]

    2020-06-19 18:44 分类:Python
  • kafka与storm集群环境的安装步骤详解

    前言 在开始之前,需要说明下,storm和kafka集群安装是没有必然联系的,我将这两个写在一起,是因为他们都是由zookeeper进行管理的,也都依赖于JDK的环境,为了不重复再写一遍配置,所以我将这两个写在一起。若只需一[详细]

    2020-06-19 14:07 分类:编程语言
  • 一文详解消息队列——Kafka如何实现高性能IO?

    本文已收录GitHub,更有互联网大厂面试真题,面试攻略,高效学习资料等Kafka是一个高性能的消息队列,在众多消息队列产品中,Kafka的性能绝对是处于第一梯队的。我曾经在一台配置比较好的服务器上,对Kafka做过极限的性能压测,Kafka单个...[详细]

    2020-06-16 08:44 分类:编程语言
  • docker-compose.yml 示例

    version: ‘2‘ services: kafka2mongo-2: image: hub.windinfo.cn/goldwind/databack:2.1.6 environment: KAFKA_ADDRESS3: kafka-local:9092 MONGO_POC_URI3: mongodb://admin:[email pr[详细]

    2020-06-15 15:54 分类:云计算
  • Redis Persistent Replication Sentinel Cluster的一些理解

    Redis Persistent Replication Sentinel Cluster的一些理解 我喜欢把工作中接触到的各种数据库叫做存储系统,笼统地说:Redis、Mysql、Kafka、ElasticSearch 都可以视为存储系统。各个存储系统在持久化刷盘策略、checkpoint机制、事务机制...[详细]

    2020-06-13 20:24 分类:大数据
  • 数据源管理 | Kafka集群环境搭建,消息存储机制详解

    本文源码:GitHub·点这里||GitEE·点这里一、Kafka集群环境1、环境版本版本:kafka2.11,zookeeper3.4注意:这里zookeeper3.4也是基于集群模式部署。2、解压重命名tar-zxvfkafka_2.11-0.11.0.0.tgzmvkafka_2.11-0.11.0.0kafka2.11创建日...[详细]

    2020-06-12 08:27 分类:编程语言
  • ELK+Kafka+Filebeat搭建日志系统

    ELK+Kafka+Filebeat搭建日志系统[详细]

    2020-06-10 12:01 分类:Linux