Question

我想在hive表上更新lastAccessTime，在网上谷歌之后，我得到了一个解决方案：

set hive.exec.pre.hooks = org.apache.hadoop.hive.ql.hooks.UpdateInputAccessTimeHook$PreExec;

但如果我有两个数据库A＆amp; B hive sql：

 set hive.exec.pre.hooks = 
    org.apache.hadoop.hive.ql.hooks.UpdateInputAccessTimeHook$PreExec;
    use A;
    insert overwrite A.xxx
    select  c1,c2 from B.xxx;

hive归来了我

org.apache.hadoop.hive.ql.metadata.InvalidTableException（表没有找到B.xxx

Answer 1

要检索表的'LastAccessTime'，请通过Hive shell运行以下命令，将[database_name]和[table_name]替换为相关值。

    use [database_name];
    show table extended like '[table_name]';

这将返回几个指标，包括自Epoch以来经过的毫秒数（而不是秒数）。要将该数字格式化为表示当前系统时区中该时刻的时间戳的字符串，请从该数字中删除最后三位数字，然后通过以下命令运行它：

    select from_unixtime([last_access_time]);

Answer 2

我碰巧想要同样的效果。花一点时间，最后做到；您的方法是正确的。

<property>
   <name>hive.security.authorization.sqlstd.confwhitelist.append</name>
   <value>hive\.exec\.pre\.hooks</value>
</property>

<property>
   <name>hive.exec.pre.hooks</name>
  <value>org.apache.hadoop.hive.ql.hooks.UpdateInputAccessTimeHook$PreExec</value>
</property>

如果仍然无法正常工作，则可能是您的蜂巢有一个HIVE-18060UpdateInputAccessTimeHook fails for non-current database错误。如果使用cdh，则在CDH5.15 CDH 5.15.0 Release Notes中已修复。

配置单元更新lastAccessTime

2 个答案: