IDEA中运行KafkaWordCount程序
1,从spark的example中找到KafkaWordCount.scala文件复制到idea编辑器中,引入包:2,编辑configuration, (1)KafkaWordCountProducer 选择KafkaWordCount.scala中的KafkaWordCountProducer方法 VM options 设置为:-Ds
·
1,从spark的example中找到KafkaWordCount.scala文件复制到idea编辑器中,引入包:
2,编辑configuration,
(1)KafkaWordCountProducer
选择KafkaWordCount.scala中的KafkaWordCountProducer方法
VM options 设置为:-Dspark.master=local
设置程序输入参数,Program arguments: localhost:9092 test 3 5
具体信息如下
(2)KafkaWordCount
配置如下:
3,先运行KafkaWordCountProducer,再运行KafkaWordCount,在KafkaWordCount的输出窗口中可以看到如下两个情况:
Kafka开源项目指南提供详尽教程，助开发者掌握其架构、配置和使用，实现高效数据流管理和实时处理。它高性能、可扩展，适合日志收集和实时数据处理，通过持久化保障数据安全，是企业大数据生态系统的核心。
更多推荐
0
0- 0
已为社区贡献5条内容
所有评论(0)