单节点安装参考:http://blog.csdn.net/lnho2015/article/details/51352966

下载地址参考官网 : http://kafka.apache.org/downloads

安装的时候注意scala的版本兼容问题


由于kafka涉及到多人使用,不同的版本有影响,存在兼容性问题。

特此做了一个测试,结果如下:

server端的版本较高,能兼容低版本的client(包括producer and consumer)

如果client端的版本较高:

1. producet则无法成功写入

2. consumer 消费会报错,也无法成功消费。

此处针对的是0.8 ,0.9  和 0.10 三个版本之间进行兼容测试,而同一个版本的各个子版本是兼容的,比如0.9.0.0 server兼容0.9.0.1 的client端。


对于不同的client端之间的兼容性测试,比如producer client 和高版本的consumer client 没有做。这些我只在shell中进行消费测试,应该没问题,毕竟server端已经将两者分开,

不兼容的数据server也不能被成功消费掉。



官网也提供了,不同版本的升级问题,可以参考。

http://kafka.apache.org/documentation/#consumerapi

Logo

Kafka开源项目指南提供详尽教程,助开发者掌握其架构、配置和使用,实现高效数据流管理和实时处理。它高性能、可扩展,适合日志收集和实时数据处理,通过持久化保障数据安全,是企业大数据生态系统的核心。

更多推荐