Question

我正在使用 Azure Databricks 在 Azure Data Lake Storage Gen2 上创建增量表，但遇到错误。

代码：

dataframe.write.format("delta").mode("overwrite").option("path","abfss://<ContainerName>@<StorageAccount>.dfs.core.windows.net").saveAsTable("test_table")

错误：

IllegalArgumentException: java.net.URISyntaxException: Relative path in absolute URI: abfss://<ContainerName>@<StorageAccount>.dfs.core.windows.net_delta_log

Answer 1

您需要设置数据湖内特定目录的路径，而不是容器顶部。类似的东西：

ContainerName = "container"
StorageAccount = "account"
table_path = f"abfss://{ContainerName}@{StorageAccount}.dfs.core.windows.net/test-table"
dataframe.write.format("delta").mode("overwrite")\
  .option("path", table_path).saveAsTable("test_table")

尝试在 ADLS Gen2 上创建增量表时出现 Databricks 错误

1 个答案: