中间件与数据库:Kafka
Kafka之数据存储
本文主要讲述以下两部分内容: kafka数据的存储方式; kafka如何通过offset查找message。 1.前言写介绍kafka的几个重要概念(可以参考之前的博文Kafka的简单介绍): Broker:消息中间件处理结点,一个Kafka节点就是一个broker,多个broker可以组成
Kafka之消息传输
问题研究: 研究Kafka consumer和broker之间的数据传输方式? Kafka是如何保证可靠性? 消费机制是consumer pull还是broker push?, 如果是push的话,kafka是否知道数据传输成功 0.写在前面昨天整理完Kafka之数据存储之后,今天决定再把笔记中kafka消息传输部
Kafka文件存储机制那些事
Kafka是最初由Linkedin公司开发,是一个分布式、分区的、多副本的、多订阅者,基于zookeeper协调的分布式日志系统(也可以当做MQ系统),常见可以用于web/nginx日志、访问日志,消息服务等等,Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。