运维开发网

kafka

0
  • 面试|图解kafka的高可用机制

    对于一个复杂的分布式系统,如果没有丰富的经验和牛逼的架构能力,很难把系统做得简单易维护,我们都知道,一个软件的生命周期中,后期维护占了70%,所以系统的可维护性是极其重要的, kafka 能成为大数据领域的事实标准,很大原因是因为...[详细]

    2020-02-25 12:34 分类:编程语言
  • python对kafka的基本操作

    --coding:utf-8--fromkafkaimportKafkaProducerfromkafkaimportKafkaConsumerfromkafka.structsimportTopicPartitionimporttimebootstrap_servers=[]classOperateKafka:definit(self,bootstrap_servers,topic):self.[详细]

    2020-02-24 18:02 分类:Python
  • springboot mq docker

    作为自己熟悉几种常用mq中间件的过程记录持续更新rabbitmqactivemqrocketmqzeromqkafka[详细]

    2020-02-23 14:03 分类:编程语言
  • spring kafka producer 生产者

    spring kafka 生产者[详细]

    2020-02-17 15:25 分类:编程语言
  • Kafka集群生产环境架设笔记

    Kafka官方说明不是台详细,但网上也有很多参考,现还是将自己在CentOS7.6上架设生产环境的笔记记录下(持续更新中)。调优#vi/etc/sysctl.d/99-kafka.conf#swapvm.swappiness=1#dirtypagevm.dirty_background_ratio=5vm.dirty_ratio=70#t...[详细]

    2020-02-14 10:54 分类:Linux
  • spark1.3.0集成kafka的新办法

    从spark的官方文档中摘取的内容,做了简单的翻译。[详细]

    2020-02-13 18:36 分类:大数据
  • DataPipeline |Apache Kafka实战作者胡夕:Apache Kafka监控与调优

    胡夕,《ApacheKafka实战》作者,北航计算机硕士毕业,现任某互金公司计算平台总监,曾就职于IBM、搜狗、微博等公司。国内活跃的Kafka代码贡献者。前言虽然目前ApacheKafka已经全面进化成一个流处理平台,但大多数的用户依然使用的是其核...[详细]

    2020-02-13 16:00 分类:云计算
  • kafka为什么那个快?

    kafka是一个高吞吐速度的消息中间件,可以部署在廉价的主机上。 速度快的原因有两个: 1.从写数据方面:写入的数据按顺序写入到磁盘;memory mapped files 磁盘读写的快慢取决于你怎么使用它,写入的时候可以选择顺序写入和随机写入,kaf...[详细]

    2020-02-11 16:34 分类:大数据
  • 在centos7.4环境下安装用cm5.16安装CDH

    cloudera manager 管理CDH 以及kafka安装[详细]

    2020-02-11 15:49 分类:大数据
  • kafka&zookeeper

    一、搭建Zookeeper集群Zookeeper是一个分布式开源框架,提供了协调分布式应用的基本服务,它向外部应用暴露一组通用服务——分布式同步(DistributedSynchronization)、命名服务(NamingService)、集群维护(GroupMaintenance)等,简化...[详细]

    2020-02-11 14:04 分类:大数据