实木复合地板表无法读取新记录

时间:2020-03-30 18:03:56

标签: parquet spark-structured-streaming

我有一个卡夫卡,可以在添加模式的“ location1”(即创建镶木地板的位置)中以steam格式写入镶木地板格式。 实木复合地板表能够首次查询数据。然后我做了第二次加载。 当我检查实木复合地板文件夹的位置时,即使第二次加载,文件也被正确保存。我什至能够读取“ location1”中的第一和第二负载数据作为数据帧并将其显示出来。

但是当我选择查询该表时,该表未显示新记录,只是第一个加载记录即将出现。

我尝试了msck修复表,spark.catalog.refreshTable(“ tablename”),刷新表的表名。但是仍然没有希望。请指教。

0 个答案:

没有答案