Spring Cloud Stream将值生成为包含JSON的字符串，而不仅仅是JSON

Question

在使用SpringCloudStream的流处理应用程序中，我获取一个输入流（键入一个整数），并在其上调用selectKey，以创建一个具有相同值但具有不同键（字符串）的新主题。输入主题中包含正确JSON格式的记录，例如：

"key": {
  "id": 1
},
"value": {
  "id": 1,
  "public_id": "4273b60f-6fe6-40be-8602-d0b3ed2ecf2a", ...

问题是，流处理应用程序创建的主题的值是包含JSON的字符串，而不是正确的JSON，即：

"key": "4273b60f-6fe6-40be-8602-d0b3ed2ecf2a",
"value": "{\"id\":1,\"publicId\":\"4273b60f-6fe6-40be-8602-d0b3ed2ecf2a\"}"

代码如下:

@StreamListener
@SendTo("output")
fun process(@Input("input") stream: KStream<Int, MyObj>): KStream<String, MyObj> =
         stream.selectKey { _, value -> value.publicId }

上面的函数所做的是消耗输入流，并生成一个输出流（被发送到输出）。该输出流与输入流具有相同的值，但只是一个不同的键。（在这种情况下，键来自值的公共ID属性。）

应用程序。yml如下：

spring.cloud.stream:
  bindings:
    input:
      destination: input-topic
    output:
      destination: output-output
  kafka:
    streams:
      binder:
        application-id: test-app-id-1
      bindings:
        input:
          consumer:
            keySerde: org.apache.kafka.common.serialization.Serdes$IntegerSerde
        output:
          producer:
            keySerde: org.apache.kafka.common.serialization.Serdes$StringSerde

我缺什么了吗？这实际上是一个问题，还是JSON可以作为字符串存储在Spring Cloud Stream生成的消息中？

其他我尝试过但没有产生影响的事情：

• 使用本机解码/编码
• 将 spring.cloud.stream.bindings.output.content-type 设置为 application/json
• 使用映射而不是选择键

Answer 1

这意味着您将公共ID："4273b60f-6fe6-40be-8602-d0b3ed2ecf2a"作为字符串而不是POJO发送。

如果这是您要发送的内容，则应使用StringSerde而不是JsonSerde。

编辑

我刚刚用一个Java应用程序测试了它，它像预期的那样工作...

@SpringBootApplication
@EnableBinding(KafkaStreamsProcessor.class)
public class So58538297Application {

    public static void main(String[] args) {
        SpringApplication.run(So58538297Application.class, args);
    }

    @StreamListener(Processor.INPUT)
    @SendTo(Processor.OUTPUT)
    public KStream<String, Foo> process(@Input(Processor.INPUT) KStream<String, Foo> stream) {
        return stream.selectKey((key, value) -> value.getBar());
    }

    @Bean
    public ApplicationRunner runner(KafkaTemplate<String, String> template) {
        ObjectMapper mapper = new ObjectMapper();
        return args -> {
            template.send(Processor.INPUT, mapper.writeValueAsString(new Foo("baz")));
        };
    }

    @KafkaListener(id = "outputGroup", topics = Processor.OUTPUT)
    public void out(String in, @Header(KafkaHeaders.RECEIVED_MESSAGE_KEY) String key) {
        System.out.println("out:" + in + ", key:" + key);
    }

    @KafkaListener(id = "copyOfInput", topics = Processor.INPUT)
    public void in(String in) {
        System.out.println("in:" + in);
    }

    public static class Foo {

        private String bar;

        public Foo() {
            super();
        }

        public Foo(String bar) {
            this.bar = bar;
        }

        public String getBar() {
            return this.bar;
        }

        public void setBar(String bar) {
            this.bar = bar;
        }

    }

}

和

spring.application.name=so58538297

spring.kafka.consumer.auto-offset-reset=earliest

和

in:{"bar":"baz"}
out:{"bar":"baz"}, key:baz