有没有办法从大多数Linux发行版上分发的时区数据库中提取历史闰秒的时刻?我在python中寻找一个解决方案,但是在命令行上运行的任何东西都可以。
我的用例是在gps-time(基本上是自1980年第一颗GPS卫星开启以来的秒数)和UTC或当地时间之间进行转换。 UTC每隔一段时间调整一次闰秒,而gps-time会线性增加。这相当于在UTC和TAI之间进行转换。 TAI也忽略了闰秒,所以TAI和gps-time应该始终以相同的偏移量进化。在工作中,我们使用gps-time作为同步全球天文观测的时间标准。
我有工作函数可以在gps-time和UTC之间进行转换,但是我必须硬编码一个闰秒表,我得到here(文件tzdata2013xx.tar.gz
包含一个名为{的文件{1}})。每隔几年宣布新的leapsecond时,我必须手动更新此文件。我更希望从标准的tzdata中获取这些信息,该信息会每年多次通过系统更新自动更新。
我很确定这些信息隐藏在leapseconds
中的某些二进制文件中。我已经能够使用/usr/share/zoneinfo/
(struct.unpack
提供有关格式的一些信息)来提取其中的一部分,但我从未完全使用它。是否有可以访问此信息的标准软件包?我知道pytz,它似乎从同一个数据库中获取标准的DST信息,但它不提供对闰秒的访问。我还发现tai64n,但查看其源代码,它只包含一个硬编码表。
修改
受到史蒂夫的回答和pytz/tzfile.py中的一些代码的启发,我终于得到了一个有效的解决方案(在py2.5和py2.7上测试):
man tzfile
结果
from struct import unpack, calcsize
from datetime import datetime
def print_leap(tzfile = '/usr/share/zoneinfo/right/UTC'):
with open(tzfile, 'rb') as f:
# read header
fmt = '>4s c 15x 6l'
(magic, format, ttisgmtcnt, ttisstdcnt,leapcnt, timecnt,
typecnt, charcnt) = unpack(fmt, f.read(calcsize(fmt)))
assert magic == 'TZif'.encode('US-ASCII'), 'Not a timezone file'
print 'Found %i leapseconds:' % leapcnt
# skip over some uninteresting data
fmt = '>%(timecnt)dl %(timecnt)dB %(ttinfo)s %(charcnt)ds' % dict(
timecnt=timecnt, ttinfo='lBB'*typecnt, charcnt=charcnt)
f.read(calcsize(fmt))
#read leap-seconds
fmt = '>2l'
for i in xrange(leapcnt):
tleap, nleap = unpack(fmt, f.read(calcsize(fmt)))
print datetime.utcfromtimestamp(tleap-nleap+1)
虽然这确实解决了我的问题,但我可能不会选择这个解决方案。相反,我将按照Matt Johnson的建议将leap-seconds.list包含在我的代码中。这似乎是用作tzdata源的权威列表,可能每年两次由NIST更新。这意味着我将不得不手动进行更新,但是这个文件很容易解析并包含一个到期日期(tzdata似乎缺失了)。
答案 0 :(得分:10)
我刚做了man 5 tzfile
并计算了一个可以找到闰秒信息的偏移量,然后读取了闰秒信息。
您可以取消注释“DEBUG:”打印语句,以查看它在文件中找到的更多内容。
编辑:程序更新到现在是正确的。它现在使用文件/usr/share/zoneinfo/right/UTC
,现在可以找到打印的闰秒。
原始程序没有跳过timezeone缩写字符,这些字符在手册页中有记录,但有点隐藏(“...和tt_abbrind用作跟随ttinfo结构的时区缩写字符数组的索引( s)在文件中。“)。
import datetime
import struct
TZFILE_MAGIC = 'TZif'.encode('US-ASCII')
def leap_seconds(f):
"""
Return a list of tuples of this format: (timestamp, number_of_seconds)
timestamp: a 32-bit timestamp, seconds since the UNIX epoch
number_of_seconds: how many leap-seconds occur at timestamp
"""
fmt = ">4s c 15x 6l"
size = struct.calcsize(fmt)
(tzfile_magic, tzfile_format, ttisgmtcnt, ttisstdcnt, leapcnt, timecnt,
typecnt, charcnt) = struct.unpack(fmt, f.read(size))
#print("DEBUG: tzfile_magic: {} tzfile_format: {} ttisgmtcnt: {} ttisstdcnt: {} leapcnt: {} timecnt: {} typecnt: {} charcnt: {}".format(tzfile_magic, tzfile_format, ttisgmtcnt, ttisstdcnt, leapcnt, timecnt, typecnt, charcnt))
# Make sure it is a tzfile(5) file
assert tzfile_magic == TZFILE_MAGIC, (
"Not a tzfile; file magic was: '{}'".format(tzfile_magic))
# comments below show struct codes such as "l" for 32-bit long integer
offset = (timecnt*4 # transition times, each "l"
+ timecnt*1 # indices tying transition time to ttinfo values, each "B"
+ typecnt*6 # ttinfo structs, each stored as "lBB"
+ charcnt*1) # timezone abbreviation chars, each "c"
f.seek(offset, 1) # seek offset bytes from current position
fmt = '>{}l'.format(leapcnt*2)
#print("DEBUG: leapcnt: {} fmt: '{}'".format(leapcnt, fmt))
size = struct.calcsize(fmt)
data = struct.unpack(fmt, f.read(size))
lst = [(data[i], data[i+1]) for i in range(0, len(data), 2)]
assert all(lst[i][0] < lst[i+1][0] for i in range(len(lst)-1))
assert all(lst[i][1] == lst[i+1][1]-1 for i in range(len(lst)-1))
return lst
def print_leaps(leap_lst):
# leap_lst is tuples: (timestamp, num_leap_seconds)
for ts, num_secs in leap_lst:
print(datetime.datetime.utcfromtimestamp(ts - num_secs+1))
if __name__ == '__main__':
import os
zoneinfo_fname = '/usr/share/zoneinfo/right/UTC'
with open(zoneinfo_fname, 'rb') as f:
leap_lst = leap_seconds(f)
print_leaps(leap_lst)
答案 1 :(得分:3)