将日期在2015-05-09T09:00:12.123462000转换为hive中的unix时间戳

时间:2016-09-29 14:25:25

标签: hive unix-timestamp to-date

我想将“2015-05-09T09:00:12.123462000”格式的日期转换为配置单元中的unix时间戳。 UNIX_TIMESTAMP('2015-05-09T09:00:12.123462000')不起作用。我不知道我怎么能改变这个。我需要这个来比较不同格式的两个日期。我将两个日期转换为unix时间戳,但这失败了。有人可以帮忙解决这个问题。

由于

3 个答案:

答案 0 :(得分:1)

您的输入使用完整的ISO 8601格式,日期和时间之间的“T”和小数秒。 Hive期望java.sql.TimestampODBC中的SQL格式(即日期和时间之间的空格),有或没有小数秒,为stated in the Hive documentation

只需应用一些非常基本的弦乐按摩 - 然后将String“施放”到Hive Timestamp。并且pleeease忘记了与UNIX_TIMESTAMP之间的往返往返:

cast(regexp_replace('2015-05-09T09:00:12.123462000', 'T',' ') as Timestamp)

答案 1 :(得分:0)

Answer by Samson Scharfrichter是正确的,应该被接受。我只想添加一些关于java.time类型的文字。

在字符串↔java.time.Instant

之间转换

java.time类取代了麻烦的旧遗留日期时间类,例如java.sql.Timestamp

Instant类代表UTC中时间轴上的一个时刻,分辨率为nanoseconds(小数部分最多九(9)位)。

您的输入字符串符合ISO 8601标准。在解析/生成表示日期时间值的字符串时,java.time类默认使用ISO 8601格式。因此无需指定格式化模式。您可以直接将字符串解析为Instant对象。

您的输入字符串缺少与UTC或时区偏移的指示。如果打算使用UTC,请为Z添加Zulu,这意味着UTC。

Instant instant = Instant.parse( "2015-05-09T09:00:12.123462000" + "Z" );

您可以生成此类字符串,只需调用toString即可。 toString使用的默认格式化程序根据需要以三位数组打印小数部分。在此示例中,最后三位数字为零,因此省略它们。

String output = instant.toString(); 
  

2015-05-09T09:00:12.123462Z

要将其转换为Hive所期望的SQL样式字符串,请将T替换为空格并删除Z

String inputForHive = output.replace( "T" , " " ).replace( "Z" , "" );
  

2015-05-09 09:00:12.123462

从数字转换

Hive还提供以下转换:

  • 整数#从1970年开始的Unix / Posix epoch开始的整秒计数(1970-01-01T00:00:00Z)。
  • 浮点数号与上面相同,但在分数秒内达到纳秒分辨率。

第二个我建议你避免。 Java中的floating-point类型(例如floatFloatdoubleDouble会故意牺牲准确性以缩短执行时间。这通常会在小数部分的末尾产生无关的数字。如果你需要小数秒,坚持使用String类型& Instant对象。

可以通过调用Instant方法轻松地从getEpochSecond获取第一个。当然这意味着数据丢失,因为这种方法留下了任何小数秒。

long secondsSinceEpoch = instant.getEpochSecond();

走向另一个方向。

Instant instant = Instant.ofEpochSecond( secondsSinceEpoch );

比较

拥有Instant个对象后,您可以与compareToequalsisBeforeisAfter等方法进行比较。

Boolean happenedBefore = thisInstant.isBefore( thatInstant );

关于java.time

java.time框架内置于Java 8及更高版本中。这些类取代了麻烦的旧日期时间类,例如java.util.Date.Calendar和& java.text.SimpleDateFormat

现在位于Joda-Timemaintenance mode项目建议迁移到java.time。

要了解详情,请参阅Oracle Tutorial。并搜索Stack Overflow以获取许多示例和解释。

大部分java.time功能都被反向移植到Java 6& ThreeTen-Backport中的7,并进一步适应Android中的ThreeTenABP(见How to use…)。

ThreeTen-Extra项目使用其他类扩展java.time。该项目是未来可能添加到java.time的试验场。您可以在此处找到一些有用的课程,例如IntervalYearWeekYearQuartermore

答案 2 :(得分:0)

如果可用,您只需使用以下语法

1)检查您的蜂巢安装中是否提供了哪些UDF?

show functions;

2)如果从from_unixtime()函数看到,则:

from_unixtime(your_timestamp_field)

这将解决问题!

如果您喜欢我的回答,请添加评论!