Question

我有一个具有以下结构的json文件：

[{
    "metric" : "movie.Guns",
    "tags" : {
        "channel" : "143"
    }
    "dps" : {
        "1448942400" : 2.5174216027874565,
        "1448943000" : 4.378333333333333,
        "1448943600" : 4.04,
        "1448944200" : 4.805
    }
 }
....
]

我试图使用Apache Drill从中提取一些数据。基本上我需要有4列：度量，通道，时间戳和值。

通过上面的例子，结果应该是：

metric,     channel, timestamp,  value
movie.Guns, 143    , 1448942400, 2.5174216027874565
movie.Guns, 143    , 1448943000, 4.378333333333333
movie.Guns, 143    , 1448943600, 4.04
movie.Guns, 143    , 1448944200, 4.805

我已经编写了以下sql来实现这个目标：

select a.metric, a.channel, a.dps.key, a.dps.value from
  (select flat.channel, flat.metric, flat.dps dps from 
    (select t.tags.channel as channel, t.metric, FLATTEN(KVGEN(t.dps)) as  dps from dfs.`/Users/Home/Downloads/tmsdb.json` t)

出于某种原因，问题是a.dps.value列。如果此列未返回其正常工作状态。只要我带来它即时收到错误消息ARSE ERROR: Encountered ". value" at line 2, column 45...

如果我仅选择a.dps我获得的值{"key":"1448942400","value":2.5174216027874565}，如果选择了a.dps.key，则会返回正确的值。

不确定问题出在哪里。

Answer 1

一分钟后，我发现了答案：）

要返回正确的结果，应选择value列，如下所示：

select a.metric, a.channel, a.dps.key, a.dps.`value` ...

Apache Drill错误选择展平kvgen值

1 个答案: