我有一个hive表列表,其中一些是分区的。给定一列我需要检查特定表是否在该列上进行了分区。 我搜索过并发现 desc格式化的tablename 会导致表格的所有细节。 由于我必须遍历所有表并获取列表,因此desc格式化将无济于事。 还有其他方法可以做到。
答案 0 :(得分:2)
您可以直接连接到Metastore并查询它:
metastore=# select d."NAME" as DATABASE,
t."TBL_NAME" as TABLE,
p."PKEY_NAME" as PARTITION_KEY
from "PARTITION_KEYS" p
join "TBLS" t on p."TBL_ID"=t."TBL_ID"
join "DBS" d on t."DB_ID"=d."DB_ID";
database | table | partition_key
----------+-------------+---------------
default | src_union_1 | ds
default | cbo_t1 | dt
default | cbo_t2 | dt
查询Metastore的确切语法取决于您对Metastore的特定选择(在我的例子中是PostgreSQL)。