如何在Python / flask中从服务器将Twitter元数据流式传输到客户端浏览器

时间:2012-10-18 23:44:20

标签: python mongodb twitter flask tweepy

我正在尝试向客户端返回一个Twitter元数据流,客户端以一个由tweepy的'track'过滤的形式输入。

我遇到的问题是,只要服务器收到并处理请求,就不会将任何内容返回给浏览器。到目前为止,这是我的代码:

main.py:

import flask
from flask.views import MethodView
from tweetStreamsRT import StreamerRt


app = flask.Flask(__name__)
app.secret_key = "asecret"

class View(MethodView):

def get(self):
    return flask.render_template('index.html')

def post(self):
    results = StreamerRt().filter(track = (flask.request.form['event']))
    flask.flash(results)
    return self.get()

 app.add_url_rule('/', view_func = View.as_view('index'), methods=['GET', 'POST'])
 app.debug = True
 app.run()

连接到Twitter Streaming API的类:

import sys
import tweepy
import json
import time
#from textwrap import TextWrapper
import pymongo

CONSUMER_KEY = ''
CONSUMER_SECRET = ''

ACCESS_TOKEN = ''
ACCESS_TOKEN_SECRET = ''

auth = tweepy.OAuthHandler(CONSUMER_KEY,CONSUMER_SECRET)
auth.set_access_token(ACCESS_TOKEN,ACCESS_TOKEN_SECRET)


connection = pymongo.Connection()  
db = connection.twitterStream

class Listener(tweepy.StreamListener):


    def on_status(self, status):
        message = {}

        if status.author.lang == 'en':
            try:
                message = {
                           'Author': status.author.screen_name,
                           'Author_id': status.id,
                           'Time_normal': str(status.created_at),
                           'geo_enabled': status.author.geo_enabled,
                           'Geo': status.geo,
                           'Place' : status.place,
                           'Coordinates': status.coordinates}

                db.tweetStream.insert(message)


            except Exception, e:
                print >> sys.stderr, 'Encountered Exception:', e
                pass

        def on_error(self, status_code):

            waitPeriod = 60
            if status_code == 420:
                print >> sys.stderr, 'Encountered a %i Error, will retry in %i minutes'     % \
                (status_code, waitPeriod/60)
                time.sleep(waitPeriod)
                waitPeriod *= 2
                return waitPeriod
            else:            
                print >> sys.stderr, 'Encountered error with status code:', status_code
                return True 

        def on_timeout(self):
            print >> sys.stderr, 'Timeout...'
            return True 

def StreamerRt():
    return tweepy.streaming.Stream(auth, Listener(), timeout=60)

我的html文件继承自base并形成html文件:

{% extends "base.html" %}
{% import "forms.html" as forms %}


{% block page_header %}
  <div class="page-header">
    <h1>Welcome</h1>
  </div>
{% endblock %}
{% block content %}
  <h2>Enter the Event you would like to follow</h2>
      <form action="/" method="post">
            <input type="text" name="event" />
            <input type="submit" value="Submit Query" />
          </form>
        {% with messages = get_flashed_messages() %}
    {% if messages %}
                Results:
                <pre>
                    {% for message in messages %}
{{ message }}
                    {% endfor %}
                  </pre>
               {% endif %}
             {% endwith %}        
           {% endblock %}

似乎我无法将任何流数据返回给客户端。

如何将Twitter Streaming API中的某些元数据返回到浏览器,同时将其写入数据库。

由于

此外,StreamerRt函数不会按照客户端的输入过滤,但似乎返回整个公共时间线。

1 个答案:

答案 0 :(得分:1)

我认为Flask-Sijax正是您所寻找的。 Hookbox是另一种选择,here是关于如何将hookbox与flask集成的教程。另一种选择是gevent here是关于使用gevent with flask的SO帖子。我能想到的最后一个是tornado