Question

我已经定义了一个由记录组成的Avro架构，该记录包含两个（或更多）不同记录的并集，例如：

{
  "type":"record",
  "name":"MyCompositeRecord",
  "fields":
  [
    {"name":"SomeCommonData","type":"string"},
    {"name":"MoreCommonData","type":"float"},
    {"name":"CompositeRecord","type":
      [
        {
          "type":"record",
          "name":"FirstOption",
          "fields":
          [
            {"name":"x","type":"string"},
            {"name":"y","type":"long"}
          ]
        },
        {
          "type":"record",
          "name":"SecondOption",
          "fields":
          [
            {"name":"z","type":"int"},
            {"name":"w","type":"float"},
            {"name":"m","type":"double"},
            {"name":"l","type":"boolean"}
          ]
        }
      ]
    }
  ]
}

看起来不太清楚，但我希望你能得到这样的想法：我有一些由一些数据组成的记录（“SomeCommonData”和“MoreCommonData”）以及两种不同类型记录的联合（“FirstOption”和“ SecondOption“）。在序列化/反序列化时，我应该能够创建两个子记录中的任何一个并序列化“MyCompositeRecord”。

我没有尝试为架构生成代码，因为我打算只使用通用记录。但是，我不确定这些通用记录是否以及如何序列化。我在网上找不到任何例子。我将使用java来序列化/反序列化。我能够为模式创建一个编写器/阅读器，如下所示：

Schema.Parser parser = new Schema.Parser();
Schema schema = parser.parse(COMPOSITE_SCHEMA);
DatumWriter<GenericRecord> writer = new GenericDatumWriter<>(schema);
DatumReader<GenericRecord> reader = new GenericDatumReader<>(schema);
GenericRecord datum = new GenericData.Record(schema);

关于如何从这里开始实际构建记录的任何想法？

由于

Answer 1

对于联盟而言，它与设置任何其他字段没有什么不同：

GenericRecord datum = new GenericData.Record(schema);

datum.set(1, data);

其中1是Union字段编号，data是要设置的值。

如果你看一下 getDefaultValue AvroEditor - Helper，您将看到我为每个Avro Type使用的默认值。数组必须实现 GenericArray 。

如何在java中定义Avro联合

1 个答案: