可配置ADL凭证的Hive表创建

时间:2018-09-03 12:59:47

标签: azure hive azure-data-lake

团队,

在蜂巢创建表中,我需要加载adl文件,当我用谷歌搜索时,我发现需要在core-site.xml中配置提供者类型,客户端ID,客户端凭据。我的要求是,在创建配置单元表时,我们需要动态配置这些凭据。将s3文件加载到配置单元表中时也是如此。

create table employee(
    id int,
    name string
) location 's3a://<access_key>:<secret_key>@<my-bucket>/<s3_path>' 

类似地,可以在adl文件路径上创建配置单元表吗?

谢谢

1 个答案:

答案 0 :(得分:0)

  1. 不,由于原因(2)
  2. URI机密的功能已从S3A移除,因为它终止了导致您的关键AWS机密记录到各处:您的应用程序日志,异常中的错误消息等。

恐怕您需要提出另一种解决方案。