kafka
-
Kafka中位移提交那些事儿
本文已收录GitHub，更有互联网大厂面试真题，面试攻略，高效学习资料等之前我们说过，Consumer 端有个位移的概念，它和消息在分区中的位移不是一回事儿，虽然它们的英文都是 Offset。今天我们要聊的位移是 Consumer 的消费位移，它记录了...[详细]
2020-07-05 09:26 分类：编程语言 -
你一定不能错过的Kafka控制器
控制器组件（Controller），是 Apache Kafka 的核心组件。它的主要作用是在 ApacheZooKeeper 的帮助下管理和协调整个 Kafka 集群。集群中任意一台 Broker 都能充当控制器的角色，但是，在运行过程中，只能有一个 Broker 成为控制器，行使...[详细]
2020-07-05 09:22 分类：编程语言 阿里架构师亲授：Kafka和RocketMQ的消息复制实现的差异点在哪？
本文已收录GitHub，更有互联网大厂面试真题，面试攻略，高效学习资料等众所周知，消息队列在收发两端，主要是依靠业务代码，配合请求确认的机制，来保证消息不会丢失的。而在服务端，一般采用持久化和复制的方式来保证不丢消息。把消息复...[详细]
2020-07-05 08:45 分类：编程语言Python通过kerberos安全认证操作kafka方式
如何通过Kerberos认证. 1.安装Kerberos客户端 CentOS： yum install krb5-workstation 使用which kinit查看是否安装成功；[详细]
2020-06-19 18:44 分类：Python-
kafka与storm集群环境的安装步骤详解
前言 在开始之前，需要说明下，storm和kafka集群安装是没有必然联系的，我将这两个写在一起，是因为他们都是由zookeeper进行管理的，也都依赖于JDK的环境，为了不重复再写一遍配置，所以我将这两个写在一起。若只需一[详细]
2020-06-19 14:07 分类：编程语言 -
一文详解消息队列——Kafka如何实现高性能IO？
本文已收录GitHub，更有互联网大厂面试真题，面试攻略，高效学习资料等Kafka是一个高性能的消息队列，在众多消息队列产品中，Kafka的性能绝对是处于第一梯队的。我曾经在一台配置比较好的服务器上，对Kafka做过极限的性能压测，Kafka单个...[详细]
2020-06-16 08:44 分类：编程语言 docker-compose.yml 示例
version: ‘2‘ services: kafka2mongo-2: image: hub.windinfo.cn/goldwind/databack:2.1.6 environment: KAFKA_ADDRESS3: kafka-local:9092 MONGO_POC_URI3: mongodb://admin:[email pr[详细]
2020-06-15 15:54 分类：云计算-
Redis Persistent Replication Sentinel Cluster的一些理解
Redis Persistent Replication Sentinel Cluster的一些理解 我喜欢把工作中接触到的各种数据库叫做存储系统，笼统地说：Redis、Mysql、Kafka、ElasticSearch 都可以视为存储系统。各个存储系统在持久化刷盘策略、checkpoint机制、事务机制...[详细]
2020-06-13 20:24 分类：大数据 -
数据源管理 | Kafka集群环境搭建，消息存储机制详解
本文源码：GitHub·点这里||GitEE·点这里一、Kafka集群环境1、环境版本版本：kafka2.11，zookeeper3.4注意：这里zookeeper3.4也是基于集群模式部署。2、解压重命名tar-zxvfkafka_2.11-0.11.0.0.tgzmvkafka_2.11-0.11.0.0kafka2.11创建日...[详细]
2020-06-12 08:27 分类：编程语言
加载中,请稍侯......