检查hive表是否在给定列上进行了分区

时间:2017-07-06 09:47:58

标签: hadoop hive hiveql

我有一个hive表列表,其中一些是分区的。给定一列我需要检查特定表是否在该列上进行了分区。 我搜索过并发现 desc格式化的tablename 会导致表格的所有细节。 由于我必须遍历所有表并获取列表,因此desc格式化将无济于事。 还有其他方法可以做到。

1 个答案:

答案 0 :(得分:2)

您可以直接连接到Metastore并查询它:

metastore=# select d."NAME" as DATABASE, 
  t."TBL_NAME" as TABLE, 
  p."PKEY_NAME" as PARTITION_KEY 
  from "PARTITION_KEYS" p 
  join "TBLS" t on p."TBL_ID"=t."TBL_ID" 
  join "DBS" d on t."DB_ID"=d."DB_ID";

 database |    table    | partition_key
----------+-------------+---------------
 default  | src_union_1 | ds
 default  | cbo_t1      | dt
 default  | cbo_t2      | dt

查询Metastore的确切语法取决于您对Metastore的特定选择(在我的例子中是PostgreSQL)。