用jq产生场值频率计数

时间:2019-11-15 17:10:48

标签: json stream histogram jq summary

我可以像这样从JSON字段查询所有唯一值:

$ cat all.json | jq '.complianceState' | sort | uniq

"compliant"
"configManager"
"inGracePeriod"
"noncompliant"
"unknown"

而且我可以像这样简单地查询每个唯一字段值的频率计数:

$ cat all.json | jq '.complianceState' | grep '^"configManager"$' | wc -l

116

jq中是否有一种方法可以一次完成所有操作以产生如下输出:

{
    "compliant" : 123000,
    "noncompliant" : 2000,
    "configManager" : 116
}

1 个答案:

答案 0 :(得分:1)

在我的标准库中:

# bag of words
# WARNING: this is not collision-free!
def bow(stream): 
  reduce stream as $word ({}; .[($word|tostring)] += 1);

有了这个,您可以使用过滤器:

bow(inputs | .complianceState)

与-n命令行选项结合使用。

总结

将所有这些组合在一起的一种方法是将jq的上述各行放置在一个文件中,例如bow.jq,并按如下所示调用jq:

jq -n -f bow.jq all.json

另一种方法是使用模块系统-有关详细信息,请参见jq手册和/或Cookbook