模仿Twitter的Streaming API

时间:2013-09-25 00:40:04

标签: python streaming python-requests bottle

Twitter实现streaming API一次发送一条推文,作为JSON blob。此外,像Python requests这样的库可以像这样使用它,

import json
import requests

r = requests.get('http://httpbin.org/stream/20', stream=True)

for line in r.iter_lines():

    # filter out keep-alive new lines
    if line:
        print json.loads(line)

我如何在服务器端实现可以以相同方式使用的东西?理想情况下,使用类似bottle的内容?

2 个答案:

答案 0 :(得分:0)

人们的目标是创建一个基于uri滚动数据流的模块 - 而不是使其成为RESTful。

例如 //site.org/stream/40 /

有几种与curl或请求等HTTP库进行通信的方法。一种基本方法是接受收件人的POST数据,将其存储在具有唯一ID的数据库中并等待响应。你可以使用javascript的xhr来确定响应是否准备就绪。

总而言之,它应该是一个python模块,无论你使用django,瓶子等都是你的电话。

希望有所帮助。

答案 1 :(得分:0)

server.py

import gevent.monkey; gevent.monkey.patch_all()

import itertools
import json
import random
import time

import bottle


@bottle.get("/foo")
def foo():
  for i in range(5):
    o = {"i": i, "r": random.random()}
    print 'sending: {}'.format(o)
    yield json.dumps(o) + "\n"
    time.sleep(1)


if __name__ == '__main__':
  bottle.run(
    host="localhost",
    port=1234,
    server="gevent"
  )

client.py

import json
import pprint
import sys

import requests


def main(url):
  print 'Reading from {}'.format(url)
  for line in requests.get(url, stream=True).iter_lines(chunk_size=1):
    pprint.pprint(json.loads(line))
  print 'All done.'


if __name__ == '__main__':
  main(sys.argv[1])

用法,

$ python server.py &
$ python client.py http://localhost:1234/foo