Spark正在timestamptype列中截断毫秒部分。想要7位数字仅显示3位数字

时间:2019-03-26 18:23:20

标签: apache-spark pyspark timestamp format databricks

我想了解Timestamptype格式。实际上,我们正在读取或读取的日志包含日期时间列,例如 2018-11-07T07:23:22.2873555Z ,因此它包含年,月,日,时,分,秒和毫秒,但精度为毫秒是7位数字。从文件读取这些日志时,我正在使用 timestampFormat =“ yyyy-dd-MM HH:mm:ss.SSSSSSS” 。但是它截断了毫秒部分,并且我只能得到最多3位的毫秒,就像读取上面的日期时间一样,我得到的 2018-11-07T07:23:22.287Z 在处理期间会受到影响。那么,您可以帮助我获得所有毫秒数还是您有任何想法?

0 个答案:

没有答案