使用CSV文件创建增量表

时间:2020-10-05 14:21:30

标签: python

我正在尝试在数据块中创建增量表。我使用this link作为学习参考。这里提到对于所有文件类型,我需要将文件读入DataFrame并以增量格式写出:所以我用python编写了以下代码

import pandas as pd
df=pd.read_csv('my file path/data.csv')
df.write.format("delta").save("/mnt/delta/df")
spark.sql("CREATE TABLE df USING DELTA LOCATION '/mnt/delta/df/'")

但是我收到了错误消息

'DataFrame' object has no attribute 'write'

您能帮我解决问题吗?

0 个答案:

没有答案