为什么谷歌的pandas_datareader不起作用?

时间:2017-11-29 20:25:57

标签: google-finance pandas-datareader

我尝试通过以下代码从Google财经中获取数据:

import pandas_datareader.data as wb
import datetime as dt
start = dt.datetime(2015, 1, 1)
end = dt.datetime(2017, 1, 1)

dt = wb.DataReader('FB', 'google', start, end)
dt.head()

我得到了这个。

UnicodeDecodeError: 'utf-8' codec can't decode byte 0xa0 in position 24697: invalid start byte

但如果我改变了谷歌'到'yahoo'(通过使用雅虎财务),它工作正常。那么它有什么问题呢?

1 个答案:

答案 0 :(得分:3)

有一个未解决的问题here

下面是一个快速解决方案,从源头移植,削减它并进行一些轻微的调整。

我认为问题在于requests.get()返回的正文并读取结果字节。 (回溯同意这一点。)例如,尝试data = requests.get(url).content(获取字节);这会失败。下面,data = requests.get(url).text有效。

我真的没有经过严格的测试,但Google API看起来确实运行正常。例如,url生成的导出链接目前运行正常。

import datetime
import requests
from io import StringIO
from pandas.io.common import urlencode
import pandas as pd

BASE = 'http://finance.google.com/finance/historical'


def get_params(symbol, start, end):
    params = {
        'q': symbol,
        'startdate': start.strftime('%Y/%m/%d'),
        'enddate': end.strftime('%Y/%m/%d'),
        'output': "csv"
    }
    return params


def build_url(symbol, start, end):
    params = get_params(symbol, start, end)
    return BASE + '?' + urlencode(params)


start = datetime.datetime(2010, 1, 1)
end = datetime.datetime.today()
sym = 'SPY'
url = build_url(sym, start, end)

data = requests.get(url).text
data = pd.read_csv(StringIO(data), index_col='Date', parse_dates=True)

print(data.head())
#               Open    High     Low   Close     Volume
# Date
# 2017-11-30  263.76  266.05  263.67  265.01  127894389
# 2017-11-29  263.02  263.63  262.20  262.71   77512102
# 2017-11-28  260.76  262.90  260.66  262.87   98971719
# 2017-11-27  260.41  260.75  260.00  260.23   52274922
# 2017-11-24  260.32  260.48  260.16  260.36   27856514

编辑:问题应该在pandas_datareader的0.6.0版本上修复。如果没有,请重新打开as bashtage requested