1、实现日志的本地存储
且日志的名字不变
listentcp–evaluatejsonpath–mergecontent–putfile(evaluatescript)
putfile不支持添加数据流到文件,故可以通过自己写脚本来实现。
这里写图片描述
2、实现日志到hdfs的保存
同理
3、根据不同数据内容决定数据流向(正则匹配)
这里写图片描述
EXtractText
4 getkafka
这里写图片描述

Logo

Kafka开源项目指南提供详尽教程,助开发者掌握其架构、配置和使用,实现高效数据流管理和实时处理。它高性能、可扩展,适合日志收集和实时数据处理,通过持久化保障数据安全,是企业大数据生态系统的核心。

更多推荐