在databricks笔记本中安装Azure Data Lake Storage Gen1(集群运行时:3.5 LTS Scala 2.11 Python3)

时间:2019-01-30 21:38:29

标签: azure mount azure-data-lake databricks

我使用以下代码来安装ADLS的Gen1在DBFS天青Databricks笔记本安装

val configs = Map(
  "dfs.adls.oauth2.access.token.provider.type" -> "ClientCredential",
  "dfs.adls.oauth2.client.id" -> "5xxxxxx-yyyyy-zzzz-aaaa-bbbbbbbb",
  "dfs.adls.oauth2.credential" -> "key value blah blah",
  "dfs.adls.oauth2.refresh.url" -> "https://login.microsoftonline.com/unique-ID-UID/oauth2/token")
​    ​
dbutils.fs.mount(
 source = "adl://adlsgen1name.azuredatalakestore.net/dev",
  mountPoint = "/mnt/dev2",
  extraConfigs = configs)

我遇到错误了

  

笔记本:14:错误:未找到:值extraConfigs

     

extraConfigs =配置)

相同的代码在运行时5.0群集中可以正常工作。我必须使用3.5 LTS为拓蓝便携性。什么是3.5 LTS的synatx。

注意:使用数据框API和RDD API,Principal和Key可以正常工作

Here是我用于文档参考的URL

0 个答案:

没有答案