有没有可能在Avro模式中有一个可选字段（即该字段根本不出现在.json文件中）？

Question

有没有可能在Avro模式中有一个可选字段（即该字段根本不出现在.json文件中）？

在我的Avro模式中,我有两个字段：

{"name": "author", "type": ["null", "string"], "default": null},
{"name": "importance", "type": ["null", "string"], "default": null},

在我的JSON文件中，这两个字段可以存在也可以不存在。

但是，当它们不存在时，我会收到一个错误（例如，当我使用avro-tools命令行客户端测试这样的JSON文件时）：

Expected field name not found: author

我理解，只要字段名存在于JSON中，它就可以是null或string值，但我要表达的是“如果这些字段名不存在，或者如果它们存在并且是null或string的话，这个JSON是有效的”。

这可以用Avro模式表达吗？如果是，怎么做？

Answer 1

根据avro规范，这是可能的，使用default属性。

参见https://avro.apache.org/docs/1.8.2/spec.html

default：此字段的默认值，在读取缺少此字段的实例时使用（可选）。允许值取决于字段的架构类型，如下表所示。联合字段的默认值对应于联合中的第一个架构。

在您给出的示例中，您确实添加了值为“null”的默认属性，因此这应该可以工作。但是，支持它还取决于您用来阅读avro消息的库(c、c++、python、Java、c#、ruby等都有库）。也许（可能）您使用的库缺少这个特性。

Answer 2

可以将默认属性定义为未定义的示例。因此可以跳过该字段。

{“name”：“first_name”,“type”：“string”,“default”：“undefined”},

在Avro中所有的领域都是管理的。如果希望它是可选的，则将其类型与NULL合并。示例：

  {
    "name": "username",
    "type": [
      "null",
      "string"
    ],
    "default": null
  },