中间件与数据库：Kafka
Kafka基本原理
简介 Apache Kafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发，之后成为Apache项目的一部分。Kafka是一种快速、可扩展的、设计内在就是分布式的，分区的和可复制的提交日志服务。 Kafka架构 它的架构包括以下组件： 话题（Topic）：是特定类型的消息流。消息是字
Kafka参数优化 — IO系统优化
Centos6系统默认的IO调度器是CFQ（Completely Fair Queuing），Kafka是顺序IO读写模型，使用Deadline和NOOP无疑是更好地选择。
Kafka之数据存储
本文主要讲述以下两部分内容： kafka数据的存储方式； kafka如何通过offset查找message。 1.前言写介绍kafka的几个重要概念（可以参考之前的博文Kafka的简单介绍）： Broker：消息中间件处理结点，一个Kafka节点就是一个broker，多个broker可以组成
Kafka之消息传输
问题研究： 研究Kafka consumer和broker之间的数据传输方式？ Kafka是如何保证可靠性？ 消费机制是consumer pull还是broker push？, 如果是push的话，kafka是否知道数据传输成功 0.写在前面昨天整理完Kafka之数据存储之后，今天决定再把笔记中kafka消息传输部
Kafka文件存储机制那些事
Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统(也可以当做MQ系统)，常见可以用于web/nginx日志、访问日志，消息服务等等，Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。