查询以查找排除hiveQL中前5%的行的平均值

时间:2013-06-05 09:38:44

标签: hadoop hive

select perecentile(time,0.95) from sometable;
 gives the 95th percentile.

我想要时间值低于此值的所有行的平均值。

在oracle中它会是这样的: -

 select avg(time) from sometable
 where 
 time<(select percentile(time,0.95) from sometable);

但是在hive中,不可能在where子句中使用子查询。当我使用union时,我无法隔离我需要比较其他元组的元组。

1 个答案:

答案 0 :(得分:1)

您可以使用百分位数的结果进行笛卡尔连接,然后过滤所有较小的值。

这样的事情:

 select avg(time) from sometable a  
 join (select percentile(time,0.95) perc from sometable) b on (1=1)   
 where a.time < b.perc;

它不是最有效的方式,但这是第一个想到的......