在应用中需要将实体类分别发送到kafka和插入mongodb中。
重写了实体类的toString方法:

    private static final Gson gson = new Gson();

    @Override
    public String toString() {
        return gson.toJson(this);
    }

发送kafka的时候调用了实体类的toString方法:

    @Override
    public void sendMessage(String topicName, Object msg) {
        HashMap<String, Object> map = new HashMap<>();
        map.put(KafkaHeaders.TOPIC, topicName);
        LOGGER.info("send msg: " + msg.toString());
        kafkaTemplate.send(new GenericMessage<>(msg.toString(), map));
    }

发现发送到kafka上的消息中包括了不想被序列化的字段。通过用transient关键字修饰该字段解决了这个问题。
但是发现插入到mongodb的记录中仍包含该字段。
插入mongodb调用的是MogoTemplate(Spring提供的操作mongodb的模版类)的insert方法:

    @Override
    public void insert(Object objectToSave, String collectionName) {

        Assert.notNull(objectToSave, "ObjectToSave must not be null!");
        Assert.notNull(collectionName, "CollectionName must not be null!");

        ensureNotIterable(objectToSave);
        doInsert(collectionName, objectToSave, this.mongoConverter);
    }

通过在该字段上加了Spring提供的@Transient注解解决了该问题。

Logo

Kafka开源项目指南提供详尽教程,助开发者掌握其架构、配置和使用,实现高效数据流管理和实时处理。它高性能、可扩展,适合日志收集和实时数据处理,通过持久化保障数据安全,是企业大数据生态系统的核心。

更多推荐