Avro tojson日期格式

时间:2017-03-09 06:38:05

标签: mysql sqoop avro spark-avro

我使用sqoop到avro文件格式导入了包含所选列的表。使用avro-tools tojson日期以奇怪的格式出现(negetive)。我该如何解码日期?

    {"first_name":{"string":"Mary"},"last_name":  {"string":"Botman"},"birth_date":{"long":-345772800000}}

其中MySQL查询五种格式正确

  mysql> select first_name, last_name, birth_date from employees where first_name like 'Mary' and last_name ='Botman';
  +------------+-----------+------------+
  | first_name | last_name | birth_date |
  +------------+-----------+------------+
  | Mary       | Botman    | 1959-01-17 |
  +------------+-----------+------------+
  1 row in set (0.07 sec)

1 个答案:

答案 0 :(得分:1)

长值-345772800000代表......

  

...自标准基准时间以来指定的毫秒数   "时代",即1970年1月1日00:00:00 GMT的数量   自1970年1月1日起的毫秒数

在您的示例中,它是一个负值,因此它会从"时代"开始向后计数。在Java代码中,您可以从此值创建LocalDate,如下所示,这将为您提供与Hive查询结果中显示的结果相同的结果。

LocalDate date17Jan1959 = Instant.ofEpochMilli(-345772800000L)
    .atZone(ZoneOffset.UTC)
    .toLocalDate();