Question

我想使用cron schedule来读取文本文件的每一行。

cron:
- description: read a line of text file
  url: /read
  schedule: every 1 minutes

但是GAE只允许在不修改的情况下读取文本文件。

如何让请求read知道前一行已被读取，并且应该读取下一行。我不想将所有读取行存储在数据存储区中然后进行查询，检查文本行是否在数据存储区中，bla bla，因为我有数百万行。

请指教。我正在考虑Google Drive Api，有什么想法吗？感谢

更新：我可以这样做吗

with open('text.txt', 'r') as f:
        txt= f.readlines()
f.close()

t = txt[line_num]
DO SOMETHING
line_num = line_num+1
deferred.defer( read_deferred, line_num, _countdown = 60 ) # 60 sec = 1 min

在其他地方，我通过调用

来触发

deferred.defer( read_deferred, 0, _countdown = 60 ) # 60 sec = 1 min

Answer 1

除了在数据库中，Cron不会让你保存状态。由于您不想使用DB，因此您可以使用延迟任务，启动它一次并继续执行直到读取最后一行，如：

def read_deferred(last_pos) :
    f = open( ... )

    if last_pos : f.seek(last_pos)

    # here you read the next line and do whatever you like,
    # just don't go further and return once you hit EOF

    last_pos = f.tell()

    deferred.defer( read_deferred, last_pos, _countdown = 60 ) # 60 sec = 1 min

你第一次称它为：

    deferred.defer( read_deferred, _countdown = 60 ) # 60 sec = 1 min

使用cron schedule读取文本文件的每一行

1 个答案: