我想删除/忽略以下json记录中的元素：
{＆＃34; _scroll_id＆＃34;：＆＃34; ==＆＃34;＆＃34; TIMED_OUT＆＃34;：假，＆＃34; _shards＆＃34; {＆＃ 34;总＆＃34;：5，＆＃34;成功＆＃34;：5，＆＃34;失败＆＃34;：0}，＆＃34;命中＆＃34; {＆＃34;总＆＃34; ：6908915，＆＃34; MAX_SCORE＆＃34;：空，＆＃34;命中＆＃34;：[ {＆＃34; _index＆＃34;：＆＃34; abc_v1＆＃34;＆＃34 ; _type＆＃34;：＆＃34; composite_request_response_v1＆＃34;＆＃34; _id＆＃34;：＆＃34; 123＆＃34;＆＃34; _score＆＃34;：1.0，＆＃34; _source＆＃ 34;：{＆＃34;响应＆＃34; {＆＃34; testResults＆＃34; {＆＃34; docsisResults＆＃34; {＆＃34;装置＆＃34;：[{＆＃34; upstreamSection＆ ＃34; {＆＃34;上行信＆＃34;：[]}，＆＃34; fluxSection＆＃34; {＆＃34; fluxInfo＆＃34;：[{}]}}]，＆＃34;事件＆ ＃34;：[]}，＆＃34; mocaResults＆＃34; {＆＃34;状态＆＃34;：[]}}}}＆＃34;排序＆＃34;：[NULL，1.0]} ]}} ，
我有以上格式的记录。我希望删除记录中突出显示的部分。有人可以指导我如何实现这一目标。无论如何我可以用hive / pig / linux / python实现这个目标吗？
答案 0 :(得分：0)
Hive中有JSON SerDe，请看：https://cwiki.apache.org/confluence/display/Hive/Json+SerDe 因此，您只能在表定义中定义所需的列，将文件放在表位置，然后仅选择已定义的列。或者，您可以在使用Java + Jackson加载文件之前对文件进行预处理/转换（将Java对象序列化或映射到JSON，反之亦然），这将为您提供最大的灵活性，因为这不像使用JSON SerDe那么简单。