Google Cloud日志导出名称

时间:2018-06-06 14:29:33

标签: hadoop google-cloud-platform google-cloud-storage stackdriver google-cloud-stackdriver

有没有办法配置从Logging导出的文件的名称?

目前导出的文件包含冒号。这是无效字符作为hadoop中的路径元素,因此PySpark例如无法读取这些文件。显然,简单的解决方案是重命名文件,但这会干扰同步。

有没有办法配置名称或将其更改为不包含冒号?任何其他解决方案表示赞赏谢谢!

https://github.com/apache/hadoop/blob/trunk/hadoop-common-project/hadoop-common/src/site/markdown/filesystem/introduction.md

1 个答案:

答案 0 :(得分:0)

目前,由于在后端自动执行此过程,因此无法在导出日志文件时更改命名约定。

如果您希望请求在GCP中提供此功能,建议您创建一个PIT。此页面可让您报告错误并请求在GCP内实施的新功能。