1、维表关联性能,最高吞吐,可以通过并行度和kafka的吞吐测出相关性能,如下图压测性能,200并发,tps正常在5w左右。

2、之前kafka吞吐最高能达到90MB/s的输入,所以压测要达到两倍的性能,也就是200mb

3、以下是同样的并行度,通过设置任务延迟,消费五个小时的数据, 来实现相关性能压测,200并发,最高吞吐tps能达到30w左右

4、kafka的压测性能如下,写入稳定在250mb左右,达到要求:

Logo

Kafka开源项目指南提供详尽教程,助开发者掌握其架构、配置和使用,实现高效数据流管理和实时处理。它高性能、可扩展,适合日志收集和实时数据处理,通过持久化保障数据安全,是企业大数据生态系统的核心。

更多推荐